[過去ログ] 【統計分析】機械学習・データマイニング26 (1002レス)
上下前次1-新
このスレッドは過去ログ倉庫に格納されています。
次スレ検索 歴削→次スレ 栞削→次スレ 過去ログメニュー
859: デフォルトの名無しさん (ワッチョイ 8bda-UAPS [118.18.6.225]) [sage] 2020/01/04(土) 15:16:22.42 ID:zJPV7nPe0(1) AAS
固有値では引っかからんだろ、ジョルダン標準形なら分かるが
860: デフォルトの名無しさん (ワッチョイ 8b2c-EDwQ [118.11.212.169]) [sage] 2020/01/04(土) 16:07:21.47 ID:+gXTwHr30(1) AAS
線形代数は大抵の大学の講義がひたすら定理の証明をなぞるだけで何のためにやってるのか説明しないからいつしか付いていく気が失せるのが問題
861(1): デフォルトの名無しさん (ワッチョイ cb01-uetj [60.86.178.93]) [sage] 2020/01/04(土) 16:55:02.67 ID:dVmT9Zd40(1/3) AAS
>>853
何本かいたか&何回発表したか しかかぞえてないぉ
だから
プレデター(ハゲタカ)ジャーナルとかプレデターカンファレーションがわらわらわー
862: デフォルトの名無しさん (ワッチョイ 6b54-BJMr [180.235.0.69]) [] 2020/01/04(土) 17:12:16.04 ID:0FWfySRB0(2/2) AAS
じゃなくて
研究者としての矜持くらい持てよ
863: デフォルトの名無しさん (ワッチョイ cb01-uetj [60.86.178.93]) [sage] 2020/01/04(土) 17:15:40.43 ID:dVmT9Zd40(2/3) AAS
矜持と予算がケンカする現状なのー
864: デフォルトの名無しさん (アウアウカー Sacf-EDwQ [182.251.146.88]) [sage] 2020/01/04(土) 17:58:28.14 ID:UI0ynszPa(1) AAS
正当な評価を受けたいまともな研究者は海外へ出ていくだけ
865: デフォルトの名無しさん (エムゾネ FFbf-37P1 [49.106.174.144]) [sage] 2020/01/04(土) 19:20:25.08 ID:mrNm0sQkF(1/9) AAS
ロジック/ロジカルシンキング/論理的思考と一般的に呼ばれるもので物事を解決しようとすると、基本的な問題解決のための方法は
帰納法によるアプローチ
演繹法によるアプローチ
この二つの何れかのアプローチに分けられる。
866: デフォルトの名無しさん (エムゾネ FFbf-37P1 [49.106.174.144]) [sage] 2020/01/04(土) 19:24:33.17 ID:mrNm0sQkF(2/9) AAS
前者は、これまでの実績/経験則を元に一般法則を推定しようとするアプローチである。
一方後者は、確固たる前提/原理原則/一般規格から、確固たる結論を得る方法である。
867: デフォルトの名無しさん (エムゾネ FFbf-37P1 [49.106.174.144]) [sage] 2020/01/04(土) 19:27:21.07 ID:mrNm0sQkF(3/9) AAS
例えば、ハイパーパラメータを弄って一定の効果・傾向を掴み、それを元に上手くいった/いかないを結論付けようとするのは帰納法による推論である
868(1): デフォルトの名無しさん (エムゾネ FFbf-37P1 [49.106.174.144]) [sage] 2020/01/04(土) 19:33:21.25 ID:mrNm0sQkF(4/9) AAS
他方、小学1年の算数の例であるが…
1+1は2である。
これは、小学生1年生であろうが学校の先生であろうが、会社の社長であろうが一国の首相であろうが同じ答えを答えるだろう。
869(1): デフォルトの名無しさん (ブーイモ MM7f-nmBI [163.49.211.159]) [sage] 2020/01/04(土) 19:34:05.47 ID:iP+F2XtLM(1) AAS
>>861
引用数も評価されると思ってた
引用稼ぐにはソース公開はいいと思うけどなあ
870(1): デフォルトの名無しさん (エムゾネ FFbf-37P1 [49.106.174.144]) [sage] 2020/01/04(土) 19:37:44.95 ID:mrNm0sQkF(5/9) AAS
ただし、
数字を十進法ではなく二進法で表せば1+1=10である。
他に、
1+1の『+』の加算の定義を『×』乗算の定義と入れ換えれば1+1=1である。
あるいは、
2という数字の定義を5と入れ換えれば1+1=5である。
871(1): デフォルトの名無しさん (エムゾネ FFbf-37P1 [49.106.174.144]) [sage] 2020/01/04(土) 19:39:43.23 ID:mrNm0sQkF(6/9) AAS
加算の定義、数字の定義、数の定義を全て正しいものと仮定して始めて1+1は2となる。
872: デフォルトの名無しさん (エムゾネ FFbf-37P1 [49.106.174.144]) [sage] 2020/01/04(土) 19:41:39.97 ID:mrNm0sQkF(7/9) AAS
ここの人は是非、自分のやっていることが前者で進めているのか、後者で進めていることなのか、よく考えてほしい
873: デフォルトの名無しさん (エムゾネ FFbf-37P1 [49.106.174.144]) [sage] 2020/01/04(土) 19:47:32.97 ID:mrNm0sQkF(8/9) AAS
帰納法で得られた結果はあくまでも推定の域を出ない。
例え10回やって10回ともいい結果が出たとしても11回目に100%よい結果が出るかどうかは保証はない。
874: デフォルトの名無しさん (エムゾネ FFbf-37P1 [49.106.174.144]) [sage] 2020/01/04(土) 19:50:57.56 ID:mrNm0sQkF(9/9) AAS
他方、演繹法は絶対的・普遍的な解を得ることができる。
これは非常に強烈なロジックなのだが、残念ながら日本ではこのアプローチを重視する人材が非常に少ない、というかいない
875: デフォルトの名無しさん (ワッチョイ 9fb3-Hx/H [125.173.52.11]) [] 2020/01/04(土) 19:52:14.75 ID:CQ4m6M+L0(2/2) AAS
公衆無線LANで何寒いこと書いてるねん
876(1): デフォルトの名無しさん (ワッチョイ 3bdd-BJMr [122.249.73.11]) [] 2020/01/04(土) 20:19:20.64 ID:ENDwxYLV0(2/2) AAS
ねー
文系出身のワナビーだろう
直感はどちらに分類されるのだろうね
877: デフォルトの名無しさん (ワッチョイ cb01-uetj [60.86.178.93]) [sage] 2020/01/04(土) 20:27:40.67 ID:dVmT9Zd40(3/3) AAS
>>869
そういえばそんなのもあったが
だいたいはお友達w同士で相互に引用しあって一蓮托生というね もうね
878: デフォルトの名無しさん (ワッチョイ 3b09-37P1 [122.223.158.203]) [sage] 2020/01/04(土) 20:43:29.49 ID:m+tPynmQ0(1/7) AAS
>>876
帰納法
879: デフォルトの名無しさん (アウアウエー Sa3f-UAPS [111.239.66.98]) [sage] 2020/01/04(土) 20:52:46.32 ID:YBqf4hfGa(1) AAS
日本での研究者の評価というと、真っ先に思い浮かぶのが科研費
過去の論文の数を基に、今後の計画を立てて予算申請する
一応審査しているのは専門家
専門性の高い論文を書いているかどうかが評価の基準
情報公開は・・・評価されるのかな?
そういうのを書く項目がないような気がする
880: デフォルトの名無しさん (ブーイモ MM8f-GLZk [210.149.253.43]) [sage] 2020/01/04(土) 21:56:53.64 ID:xLbjEwkrM(1) AAS
君たちG検定はとるの?
881(2): デフォルトの名無しさん (ワッチョイ ab01-FlZP [126.25.131.86]) [sage] 2020/01/04(土) 22:06:24.08 ID:NL29rqkc0(3/4) AAS
>>856
そんなものはない。
あってもVC次元使った奴とかバウンドが実際のデータ数よりも圧倒的に多いものしか計算できなくて
全く使い物にならん。
テストデータのサンプル数も何回か試して精度が安定する個数に設定するってのが現状。
この仕事、やってない奴ほど理論でなんとかなると思ってんだよな。
そこが実際とのギャップになってめんどくさい議論を増やしてる。
882(1): デフォルトの名無しさん (ワッチョイ cb01-UAPS [60.120.23.126]) [sage] 2020/01/04(土) 22:16:11.54 ID:Eq0fd+t90(2/4) AAS
相対性理論は帰納法で導かれたよ
883: デフォルトの名無しさん (ワッチョイ 3b09-37P1 [122.223.158.203]) [sage] 2020/01/04(土) 22:31:38.39 ID:m+tPynmQ0(2/7) AAS
相対性理論は
仮説推定⇒演繹法による検証⇒ローレンツ変換不変の前提のもとで100%正しい
884: デフォルトの名無しさん (ワッチョイ 3b09-37P1 [122.223.158.203]) [sage] 2020/01/04(土) 22:34:59.55 ID:m+tPynmQ0(3/7) AAS
仮説推定の検証が実験のみか理論かで分かれる
885(1): デフォルトの名無しさん (ワッチョイ 3b09-37P1 [122.223.158.203]) [sage] 2020/01/04(土) 22:36:39.92 ID:m+tPynmQ0(4/7) AAS
>>881
それはお前及びお前が出会ってきた人間がヘボいだけ
886: デフォルトの名無しさん (ワッチョイ ab01-FlZP [126.25.131.86]) [sage] 2020/01/04(土) 22:39:40.66 ID:NL29rqkc0(4/4) AAS
>>885
そうだな。お前みたいなヘボイ奴ばっか相手にしてる。
887: デフォルトの名無しさん (ワッチョイ cb01-UAPS [60.120.23.126]) [sage] 2020/01/04(土) 22:41:53.90 ID:Eq0fd+t90(3/4) AAS
例えば一般相対性理論は慣性質量と重力質量は等価である等の
小さな原理から大きな理論を構築した帰納的思考によるもの
888: デフォルトの名無しさん (ワッチョイ 3b09-37P1 [122.223.158.203]) [sage] 2020/01/04(土) 22:45:01.46 ID:m+tPynmQ0(5/7) AAS
だから仮説推定の後すぐに演繹法による検証をやってるのがアインシュタイン
889: デフォルトの名無しさん (ワッチョイ 3b09-37P1 [122.223.158.203]) [sage] 2020/01/04(土) 22:46:21.57 ID:m+tPynmQ0(6/7) AAS
実験やってないんだよ
890(1): デフォルトの名無しさん (ワッチョイ cb01-UAPS [60.120.23.126]) [sage] 2020/01/04(土) 23:11:36.37 ID:Eq0fd+t90(4/4) AAS
実験したとかしないとか関係ないし
891: デフォルトの名無しさん (ワッチョイ 3b09-37P1 [122.223.158.203]) [sage] 2020/01/04(土) 23:15:56.70 ID:m+tPynmQ0(7/7) AAS
??
892: デフォルトの名無しさん (ワッチョイ ab27-eg9S [164.70.253.210]) [sage] 2020/01/05(日) 06:22:18.52 ID:+jir1/5X0(1/3) AAS
自然言語処理のツールの使い方を覚えたいんですが
具体例のあるブログ記事ってないでしょうか
keras とか ALBERT とか tensorflow とかでてくるんですが
どれもインストール方法とかの説明はあるんですが
はじめからセットしてあるモデルに対して精度を出力して終わりみたいなブログ記事ばかりで
実際に日本語で質問文を投げてAIが返答するようなプログラムの書き方みたいなのが一切出てこないです
どうやって勉強すればいいんでしょうか
情報系の大学院生でプログラムはそこそこ経験があるんですが
AIに関しては原理を講義でならっただけでtensorflow すら使ったことがないレベルです
もうじき就活がはじまるのでAIが使えるってだけで有利になるらしいので
サンプルシステムを作ってみたいと思ってます
893(1): デフォルトの名無しさん (ワッチョイ 0f63-bcBw [153.218.137.102]) [] 2020/01/05(日) 06:28:31.48 ID:kv6ApXZt0(1/4) AAS
それは世間的には基礎的かもしれないが
現行のAIはそこまで対応してないだろ
文書の内容を機械が理解するのは高度
とりあえず日本→英語の翻訳を実装してみれば手がかり、オリジナリティを得られるのでは?
一般的な、唯一の手法はないという前提だが、じぶんがしらないだけかもしれないが
894: デフォルトの名無しさん (ワッチョイ 0f63-bcBw [153.218.137.102]) [] 2020/01/05(日) 06:35:30.27 ID:kv6ApXZt0(2/4) AAS
2019/08/19 05:01
AI翻訳が人間超え、言葉の壁崩壊へ
1人に1台、自動翻訳機、多言語“通訳”がポケットに
第1部:市場動向
https://tech.nikkeibp.co.jp/atcl/nxt/mag/ne/18/00046/00001/
2019/08/20 05:02
AI翻訳が人間超え、言葉の壁崩壊へ
トランスフォーマー時代到来、翻訳技術から汎用言語系AIに
第2部:技術動向
https://tech.nikkeibp.co.jp/atcl/nxt/mag/ne/18/00046/00002/
895: デフォルトの名無しさん (ワッチョイ 0f63-bcBw [153.218.137.102]) [] 2020/01/05(日) 06:41:07.68 ID:kv6ApXZt0(3/4) AAS
総務省・NICT主催「多言語音声翻訳アイデアコンテスト」(第2回)優秀賞決定!
多言語音声翻訳コンテスト運営事務局 2019年12月19日
総務省と国立研究開発法人情報通信研究機構(NICT)は、12月14日(土)TEPIAホールにて、
多言語音声翻訳技術の更なる普及や多種多様な翻訳サービスの出現を加速するため、
世界の「言葉の壁」をなくす新しいアイデアを募集する「多言語音声翻訳アイデアコンテスト」(第2回)審査会及び表彰式を開催いたしました。
https://prtimes.jp/main/html/rd/p/000000002.000050519.html
896: デフォルトの名無しさん (ブーイモ MM0f-80IA [202.214.231.24]) [sage] 2020/01/05(日) 06:55:10.09 ID:24cr/O3JM(1) AAS
機械学習だと固有値って教本にやたら出てくるけど具体的にどこで使うの?主成分分析だけ?
897(1): デフォルトの名無しさん (ワッチョイ ab27-eg9S [164.70.253.210]) [sage] 2020/01/05(日) 07:05:39.44 ID:+jir1/5X0(2/3) AAS
>>893
ツールを使うだけではBOT同志で会話するっていうのは無理で
かなり高度なチューニングの知識?がいるってことなんでしょうか
ライブラリに適当な文章大量に流し込めば勝手に知識獲得してしゃべりだすものかと思ってました
898: デフォルトの名無しさん (ワッチョイ 0f63-bcBw [153.218.137.102]) [] 2020/01/05(日) 07:15:11.42 ID:kv6ApXZt0(4/4) AAS
人工知能が2019年センター試験の英語筆記本試験で185点を獲得 2019年11月19日
人工知能プロジェクト「ロボットは東大に入れるか」の一環として、大学入試センター試験の英語筆記科目に挑戦した結果、185点(偏差値64.1)の成績を収めた。
NTTコミュニケーション科学基礎研究所(NTT CS研)ではこのプロジェクトを自然言語処理および知識処理の基礎研究を進めるベンチマークとして捉え、自動解答に関する知見を積み重ねてきた。
近年は深層学習に基づく文書読解技術が進展しており、そのなかの最新技術であるXLNetは、大規模テキストによる事前学習をベースモデルに、問題の性質に合わせた移転学習を施すことで、異なる種類の問題を比較的少量のデータから効率的に解くことを可能にした。
しかし、学習に利用できるデータが大きく不足している問題や、解答に辞書的な情報が不可欠な問題では、十分な精度の解答が得られなかった。
今回NTT CS研は以下の点で改善を施し、過去3年間のセンター本試験/追試験に対して適用した結果、安定して偏差値60以上を達成したという。
不要文除去問題の高精度化
機械学習は正解と不正解のデータの両方を入力して学習するが、文章から不要な文を見つける比較的新しい「不要文除去問題」には適用できない。
というのも、通常の文章には不要な文が含まれておらず、学習に用いるデータを集めることが難しいためだ。このため従来のAIでは、本試験/追試験で15問中6問しか正解できなかった。
そこで、不要文を含まない通常の文章から、文の順序を組み替えて擬似的に不自然な流れを作成することで、大量の不要文除去問題を自動作成する手法を考案。
これにより15問すべて正答できたという。また、過去問や独自作成問題からなるベンチマークデータにおいても、正答率を60%から86%までに高められた。
https://pc.watch.impress.co.jp/docs/news/1219388.html
899: デフォルトの名無しさん (ワッチョイ 0f10-qQU+ [153.131.102.129]) [] 2020/01/05(日) 13:14:15.07 ID:5vFDsLtv0(1/6) AAS
>>881
ないならつくるのが研究者の課題じゃ無いのかな?
900: デフォルトの名無しさん (ワッチョイ 0f10-qQU+ [153.131.102.129]) [] 2020/01/05(日) 13:16:19.91 ID:5vFDsLtv0(2/6) AAS
科学って帰納的に仮説を立てて実証することの繰り返しじゃね?
その仮説を立てたりどんな実証方法があるかを考えたりするのにこれまでに判っている事を演繹的に適用して論理展開する
両方の思考が必要だと思う
901: デフォルトの名無しさん (ワッチョイ 0f10-qQU+ [153.131.102.129]) [] 2020/01/05(日) 13:17:44.79 ID:5vFDsLtv0(3/6) AAS
>>882
時間や空間が絶対的なものではなくて光の速さが絶対的だと言う仮定を元に演繹的に論理展開していったものだと理解している
902: デフォルトの名無しさん (ワッチョイ 0f10-qQU+ [153.131.102.129]) [] 2020/01/05(日) 13:19:41.39 ID:5vFDsLtv0(4/6) AAS
>>890
あなたはそうかもしれないけど世の中的には
実験で確認されて初めてノーベル賞もらったりしてるけどな
ヒッグス粒子もそうだったし
903: デフォルトの名無しさん (ワッチョイ 9bda-UAPS [114.185.50.145]) [sage] 2020/01/05(日) 13:31:19.77 ID:98+Qbn7z0(1/2) AAS
マウント合戦
904(1): デフォルトの名無しさん (ブーイモ MM7f-nmBI [163.49.211.159]) [sage] 2020/01/05(日) 13:34:07.84 ID:/FsL/PEZM(1) AAS
物理は実験が主だよ
アインシュタインみたいな理論屋は凄いけど実験で確認出来なかったら只の妄想
905: デフォルトの名無しさん (ワッチョイ 9bda-UAPS [114.185.50.145]) [sage] 2020/01/05(日) 13:41:29.59 ID:98+Qbn7z0(2/2) AAS
イタチ野郎
906(1): デフォルトの名無しさん (ワッチョイ 0f10-qQU+ [153.131.102.129]) [] 2020/01/05(日) 14:55:53.83 ID:5vFDsLtv0(5/6) AAS
>>904
湯川博士とか理論物理で進展した領域もあると思う
実験で確認されないとただの仮説だけど
907(1): デフォルトの名無しさん (ワッチョイ cb01-uetj [60.86.178.93]) [sage] 2020/01/05(日) 15:01:35.73 ID:Xx30ZH0k0(1) AAS
>>897
(ヾノ・∀・`)ナイナイ
大量に話しかけてやれば
そのうち
それっぽい応答するようになる、かもしれない
日本語対応Python3系のコードっていうと
ちょっと古いが、
unmoっていうのがある。
探して読んでインスコして遊んでみれ。
908(2): デフォルトの名無しさん (ワッチョイ ef1d-iOMu [143.189.31.12]) [] 2020/01/05(日) 15:38:21.14 ID:rjC1FbEm0(1) AAS
ガチ勢はフツーの線形代数じゃなくて、行列の微分が自然に出てくる領域で、
一般相対論とスキルセットで親和性が高かったりする。
909(1): デフォルトの名無しさん (ブーイモ MMbf-eGyC [49.239.69.93 [上級国民]]) [sage] 2020/01/05(日) 17:38:18.20 ID:qqN6BGPlM(1) AAS
>>906
もちろん理論も大事なんだけど、物理の場合は理論がいくら発展しても実験で確かめられないと意味がないという風潮があるよ
電磁気力、弱い核力、強い核力を統一する大統一理論の有力候補の超対称性理論ってやつも、多分理論としてはかなり綺麗にまとまってるんだと思うけど、超対称性粒子が全然実験で検出されないからなかなか立場的に厳しいみたい
重力まで統一する万物の理論に関しては、例えば超弦理論なんかだと決めるべきパラメータが多すぎて、また実験も惑星規模の加速器を作ったりしなきゃいけないらしく、現実的にこの世界に適合する超弦理論が得られるかというと怪しいみたいで、物理学の仮説として取り扱うのすら反対意見があるらしいよ
910: デフォルトの名無しさん (ワッチョイ efab-nmBI [39.111.85.105]) [sage] 2020/01/05(日) 17:57:18.05 ID:ZpTtXk4N0(1) AAS
>>909
風潮じゃなくてニュートン以来の原則が実験ですよ
何故か物理は数式で表せて、しかも美しい数式になるという所から、ここ100年ちょっとは美しさという指標で、理論だけでもドンドン発展させられたのさ
911: デフォルトの名無しさん (ワッチョイ efda-37P1 [223.217.162.112]) [sage] 2020/01/05(日) 18:08:53.21 ID:qL+E1kAs0(1/3) AAS
実験検証でのデメリットとしては、実験でよい結果が得られた⇒だから正しい⇒終わり
としてしまう人が発生すること。
たまたま偶然よい結果がでただけの可能性を疑わない人がいるんですよね。
○-○aveなんかはその最たる例ですね
912: デフォルトの名無しさん (アウアウウー Sa0f-qQU+ [106.154.126.11]) [] 2020/01/05(日) 19:11:04.25 ID:aadHI+RPa(1) AAS
アニーリング方式は100%最適解が求まる類のものではないんじゃないの?
量子の振る舞いの結果を計算結果とみなすってことだろうし
量子ゲート方式なら論理演算ができるのかもしれないけど
ノイマン型でも誤り訂正とかしないとミスは起きるし
量子ビットも誤り訂正とかの技術が確立されてきたらエラー率が下がるんじゃないかな
913: デフォルトの名無しさん (ワッチョイ efda-37P1 [223.217.162.112]) [sage] 2020/01/05(日) 19:22:52.95 ID:qL+E1kAs0(2/3) AAS
>アニーリング方式は100%最適解が求まる類のものではないんじゃないの?
そのとおり。量子アニーリングで得た結果は最適解である保証はありません。
結果だけ切り取った結果、無駄な投資を生んでしまい、日本の量子コンピュータ検討の邪魔する結果となってしまいました。
914: デフォルトの名無しさん (ワッチョイ efda-37P1 [223.217.162.112]) [sage] 2020/01/05(日) 19:24:37.61 ID:qL+E1kAs0(3/3) AAS
https://www.itmedia.co.jp/news/spv/1906/03/news033.html
915(1): デフォルトの名無しさん (ワッチョイ ab01-FlZP [126.25.131.86]) [sage] 2020/01/05(日) 19:43:23.83 ID:6gmeklwC0(1/2) AAS
全くすれ違いだし
そもそもお前ら実験も理論もどっちもやってねーだろ。。
916(2): デフォルトの名無しさん (ワッチョイ 0f10-qQU+ [153.131.102.129]) [] 2020/01/05(日) 20:06:43.95 ID:5vFDsLtv0(6/6) AAS
組合せ最適化問題を解ければ判別問題の学習結果を
より早くより正確に得られるようになるんじゃね?
917(1): デフォルトの名無しさん (スッップ Sdbf-37P1 [49.98.159.214]) [sage] 2020/01/05(日) 20:07:51.30 ID:y5M6+8m0d(1/2) AAS
元々の話題の一例を語ってるだけに見えますが…
>>915は帰納法・演繹法何れで仕事をされているかたですか?
918: デフォルトの名無しさん (スッップ Sdbf-37P1 [49.98.159.214]) [sage] 2020/01/05(日) 20:08:34.48 ID:y5M6+8m0d(2/2) AAS
>>916
それ以上はスレ違いですね
919: デフォルトの名無しさん (ワッチョイ ab01-FlZP [126.25.131.86]) [sage] 2020/01/05(日) 20:49:34.82 ID:6gmeklwC0(2/2) AAS
>>916
そっちのが難しいっつーの。
>>917
両方だよ。どっちかだけで仕事になると思ってのかおめでてーな。
920: デフォルトの名無しさん (ワッチョイ ab27-eg9S [164.70.253.210]) [sage] 2020/01/05(日) 21:17:01.17 ID:+jir1/5X0(3/3) AAS
>>907
ありがとうございます!
921: デフォルトの名無しさん (ワッチョイ 0f63-bcBw [153.218.137.102]) [] 2020/01/06(月) 06:54:23.54 ID:KyZp9b9y0(1) AAS
いよいよ人間超え、AI最新事情 文章読解でもAIがついに人間超え、グーグルの「BERT」発表から1年で急成長
2019/11/13
文章読解でもAIがついに人間超え、グーグルの「BERT」発表から1年で急成長
かつてはディープラーニング(深層学習)の適用が難しいと言われていた自然言語処理の分野でも、人工知能(AI)が人間の認識精度を上回るようになった。
グーグルが2018年10月に発表したBERTは、文章の「言語らしさ」を予測する言語モデルを「Transformer」というニューラルネットワークを多段に重ねて実装したものである。
言語らしさの予測は、AIが単語や文章を理解したり自然な文章を生成したりするうえで必要不可欠な要素である。
言語モデルの応用先としては、機械翻訳や機械読解、質問応答、言葉の言い換え(換言)、表現が異なる2つの文章の意味が同じかどうかの判断(含意関係認識)などがある。
グーグルのBERTは自然言語処理の世界に衝撃を与え、論文の発表からわずか1年で2200件以上も他の論文に引用されるほどになった。
これは、BERTが応用に関するベンチマークで人間の精度を上回る成果を上げたからだ。
文章読解のスコアで人間超え
具体的には機械読解のベンチマークである「SQuAD 1.1」で人間の精度を上回った。
SQuAD 1.1は米スタンフォード大学が作ったベンチマークで、「Wikipedia」の中にある140単語ほどの文章を読み解かせて、その文章に関する質問に回答させる。
正答は元の文章の中にフレーズとして存在する。正答の部分を正しく抜き出せるかどうかがポイントとなる。
SQuAD 1.1はタスクとして単純すぎるという指摘もある。
SQuAD 1.1よりタスクの難易度が高いベンチマークは「SQuAD 2.0」や「GLUE」など他にもあり、そうしたより難しいベンチマークではBERTは人間を上回れなかった。
しかしBERTが一部でも人間をスコアで上回ったことから、この分野の研究が一気に加速し、今ではBERTを改善した手法が、より難しいベンチマークでも人間超えを果たすようになった。
https://tech.nikkeibp.co.jp/atcl/nxt/column/18/01056/111200002/
922: デフォルトの名無しさん (ワッチョイ 3bdd-BJMr [122.249.73.11]) [] 2020/01/06(月) 16:22:20.03 ID:7M4Z0nKv0(1) AAS
この手のテストに和文が無いからいまいちよくわからん
923: デフォルトの名無しさん (ワッチョイ 6b54-hZl1 [180.235.0.69]) [] 2020/01/06(月) 19:21:10.07 ID:SSsR6M4H0(1) AAS
MSRの連中が描いた本(pdf)だってさ
Foundations of Data Science
https://www.cs.cornell.edu/jeh/book.pdf
日本の研究者はなーんもしない
924(1): デフォルトの名無しさん (アウウィフ FF0f-p4uH [106.171.87.46]) [] 2020/01/07(火) 15:50:31.93 ID:2Dq0zKSWF(1) AAS
>>868
1 + 1 は 2 にはならんよ
大抵の場合 2 未満で 1.5 とか 1.0 とか
酷い時には 1 未満になることの方が多い
925: デフォルトの名無しさん (ワッチョイ 4f7c-I5PR [113.32.86.138]) [] 2020/01/07(火) 16:00:42.05 ID:8esPW0SX0(1) AAS
>>908
<・∇・>ニダ
926: デフォルトの名無しさん (ワッチョイ 5bda-2fhw [223.217.162.112]) [sage] 2020/01/08(水) 03:38:16.27 ID:LHUjt0c20(1/2) AAS
>>924は>>870-871を嫁
927: デフォルトの名無しさん (ワッチョイ 5bda-2fhw [223.217.162.112]) [sage] 2020/01/08(水) 04:04:04.17 ID:LHUjt0c20(2/2) AAS
>>908
ガチ勢は一般相対性理論なんて言わない。ゲージ曲率かファイバー束における写像の捻れで語る
928: デフォルトの名無しさん (ワッチョイ b5da-lB9F [118.18.7.9]) [sage] 2020/01/08(水) 10:16:28.43 ID:XvkUwLSh0(1) AAS
イタチの屁
929: デフォルトの名無しさん (ワイーワ2 FF13-Eg5K [103.5.142.233]) [] 2020/01/09(木) 11:42:39.35 ID:0RBXSUPhF(1) AAS
2chスレ:news
NVIDIA製GPUドライバーに深刻な脆弱性、いますぐIntelオンボードを利用に切り替えてください
930: デフォルトの名無しさん (ワッチョイ 5bda-2fhw [223.217.162.112]) [sage] 2020/01/10(金) 00:41:45.45 ID:xMwSVvEb0(1/2) AAS
https://youtu.be/fK_JGVti5y8
931: デフォルトの名無しさん (ワッチョイ 5bda-2fhw [223.217.162.112]) [sage] 2020/01/10(金) 02:20:32.44 ID:xMwSVvEb0(2/2) AAS
まあ、学生さんはデータナンちゃらリストなんてうつつ抜かしてないで、各専門の基礎教科の習得に励みましょう。
機械学習なんてあくまで多数ある問題解決手段の1ツールに過ぎない。そもそも機械学習の習得なんて社会人からでも十分。
932: デフォルトの名無しさん (ブーイモ MM43-ZFGq [49.239.68.64]) [sage] 2020/01/10(金) 08:00:59.46 ID:MP8EZybiM(1/4) AAS
excelくらいのもんだね
933(1): デフォルトの名無しさん (ワッチョイ fddd-fF6T [122.249.73.11]) [] 2020/01/10(金) 11:21:21.64 ID:dy6nGdDz0(1) AAS
数年後には無くなってそう>>データサイエンティスト
934: デフォルトの名無しさん (ブーイモ MM43-ZFGq [49.239.68.64]) [sage] 2020/01/10(金) 11:33:30.82 ID:MP8EZybiM(2/4) AAS
業務の一部として取り込まれる未来
935: デフォルトの名無しさん (アウアウカー Sa61-xSig [182.251.143.133]) [sage] 2020/01/10(金) 12:28:08.40 ID:9hvTdV+ca(1) AAS
データを元に業務上の判断をするのがデータサイエンティストの仕事
これは技術者にとって本質的な能力なのでデータサイエンティストという呼び名が無くなったとしてもこの能力を必要としなくなるわけではない
936: デフォルトの名無しさん (ブーイモ MM43-ZFGq [49.239.68.64]) [sage] 2020/01/10(金) 12:31:18.21 ID:MP8EZybiM(3/4) AAS
データを元に判断するのは、豊臣秀吉もやってたそうだから今更感
937: デフォルトの名無しさん (ワッチョイ 6501-ErPi [126.242.217.97]) [] 2020/01/10(金) 12:35:48.58 ID:K/lWprnk0(1) AAS
秀吉はデータサイエンティスト。
938: デフォルトの名無しさん (アウアウウー Sa19-8whf [106.180.2.62]) [] 2020/01/10(金) 12:47:28.71 ID:ap2klRr+a(1) AAS
技術者にはもともとデータサイエンティスト的な要素があったのに、それだけが妙に持ち上げられた
そのうち、訳もわからずデータをライブラリにぶち込むだけの人をデータサイエンティストと蔑むことになるよ
939: デフォルトの名無しさん (ワッチョイ 7d02-tgR8 [58.70.65.108]) [sage] 2020/01/10(金) 13:15:10.43 ID:W4/veIGi0(1) AAS
データサイエンティスト的なタスクって、
業務に携わってる奴がやるのが世界の普通のような
システム屋にやらせるから応用範囲が限定される
940: デフォルトの名無しさん (ワントンキン MMa3-fF6T [153.248.186.192]) [] 2020/01/10(金) 14:59:12.98 ID:jdArXowMM(1/2) AAS
マクロかexcelにツールがついて終わり
941(2): デフォルトの名無しさん (ワッチョイ 239c-fZro [61.125.210.189]) [sage] 2020/01/10(金) 16:48:37.09 ID:3HDQydXj0(1/2) AAS
若手の自称データサイエンティストと話すと
linuxわかりませんとか言う人マジで多くて嫌になる
どこがのスクール出身なのか?
クラウドのjupyter notebook上でしかコード書いたことないらしい
マジで基礎がガバガバ
そこを身につけるのは地味で退屈だから最近の人はやりたがらないのはわかるが
942: デフォルトの名無しさん (ワッチョイ 2390-ErPi [59.85.19.163]) [sage] 2020/01/10(金) 16:53:19.80 ID:XoWOAf9+0(1) AAS
ツールの話でマウントとろうとすると僕は馬鹿ですって自己紹介してるのと同じだからやめた方が良いよ
943(1): デフォルトの名無しさん (JP 0Heb-WK+R [219.162.33.141]) [sage] 2020/01/10(金) 16:54:28.69 ID:iWyShsMIH(1/3) AAS
エクセルで完結はさすがにない
944: デフォルトの名無しさん (ブーイモ MM43-ZFGq [49.239.68.64]) [sage] 2020/01/10(金) 17:00:34.97 ID:MP8EZybiM(4/4) AAS
分析から先の仕事メインならlinux知らなくてもいいかなと
技術者でなく、ただのビジネスマンだと思うが
945: デフォルトの名無しさん (ガックシ 068b-Fdcu [133.15.250.10]) [sage] 2020/01/10(金) 17:03:43.90 ID:apRS/vPU6(1) AAS
リモートサーバにコード投げて動かすときくらいしかまともにlinuxコマンド使わんわ
vscodeで開発してるからvimも最低限しか使えない
946: デフォルトの名無しさん (ワッチョイ fdb4-Tj/C [122.23.251.84]) [sage] 2020/01/10(金) 17:03:57.42 ID:6tzIS8Z40(1) AAS
自前で動かそうとしたらLinuxはあったほうがいいよ
947(1): デフォルトの名無しさん (スップ Sd03-uhcM [1.66.97.8]) [sage] 2020/01/10(金) 17:34:07.53 ID:1UGZVEFGd(1) AAS
>>941
プロダクションで動かすコードにするまでにすごい苦労しそうだな
(自称)データサイエンティストとSI屋の間に、もう一人両方の分野を知ってる人間がいないと無理そう
948: デフォルトの名無しさん (ブーイモ MM43-ZFGq [49.239.64.31]) [sage] 2020/01/10(金) 17:39:06.54 ID:o1aiizUGM(1/2) AAS
データサイエンス系の仕事手伝ってるけどSI屋が分析より下のレイヤーやるようになりそうな雰囲気
ETLとかの延長で出来るところまで
949(1): デフォルトの名無しさん (ワッチョイ 239c-fZro [61.125.210.189]) [sage] 2020/01/10(金) 17:43:26.30 ID:3HDQydXj0(2/2) AAS
>>947
ウチはジョブキュー使ってコマンドで投げるから
最低でも一連の学習処理をシェル化して
入力ファイルを配置してサブミットするというのができないと詰むんだけど
大したことではないはずなのにわかりませんとかさあ
950: デフォルトの名無しさん (ブーイモ MM43-ZFGq [49.239.64.31]) [sage] 2020/01/10(金) 17:47:52.64 ID:o1aiizUGM(2/2) AAS
kaggleみたいなUIにしとけばいいんかな
951: デフォルトの名無しさん (ワントンキン MMa3-fF6T [153.248.186.192]) [] 2020/01/10(金) 19:00:13.93 ID:jdArXowMM(2/2) AAS
msの技術力を侮ってはいけない
いずれexcelに付くよ
952(1): デフォルトの名無しさん (JP 0Heb-WK+R [219.162.33.141]) [sage] 2020/01/10(金) 19:03:54.70 ID:iWyShsMIH(2/3) AAS
そら小規模データならエクセルでも可だろうけど
ちょっと大きいデータ扱うと重たくてどうしようもないしょ
953: デフォルトの名無しさん (ワッチョイ 0b10-xl+7 [153.131.102.129]) [] 2020/01/10(金) 19:16:19.21 ID:9TebhQDM0(1/4) AAS
>>943
少し前にexcelのマクロ言語にPythonを採用するとか言う噂が上がってたけどな
今はその話は無くなってPythonからexcelを操作してくれってことになってると思う
954: デフォルトの名無しさん (ワッチョイ 0b10-xl+7 [153.131.102.129]) [] 2020/01/10(金) 19:19:06.71 ID:9TebhQDM0(2/4) AAS
>>949
社内ルール的なものはマニュアル作れば解決する問題だと思うけど
その判らない人に作るように言って判らないところは仮で書いてもらって訂正すればいいのでは?
955: デフォルトの名無しさん (ワッチョイ 0b10-xl+7 [153.131.102.129]) [] 2020/01/10(金) 19:20:16.63 ID:9TebhQDM0(3/4) AAS
>>952
表示の更新とか完了するまで再計算を停止するとスピード上がる
956: デフォルトの名無しさん (ワッチョイ 0b10-xl+7 [153.131.102.129]) [] 2020/01/10(金) 19:22:21.42 ID:9TebhQDM0(4/4) AAS
ピボットテーブルとかはexcelの方が作業効率良くない?
GUIで操作できるし
957: デフォルトの名無しさん (JP 0Heb-WK+R [219.162.33.141]) [sage] 2020/01/10(金) 19:41:25.05 ID:iWyShsMIH(3/3) AAS
議論するつもりはないけど、前処理やらバッチ処理するのもエクセルでやるんかな
958: デフォルトの名無しさん (ワッチョイ dbab-ZFGq [39.111.85.105]) [sage] 2020/01/10(金) 19:45:47.30 ID:OuRZpUf20(1) AAS
VBAで数値積分する人もいるから、ありえる
jupyterの人も増えそうだけど
上下前次1-新書関写板覧索設栞歴
あと 44 レスあります
スレ情報 赤レス抽出 画像レス抽出 歴の未読スレ AAサムネイル
ぬこの手 ぬこTOP 0.029s