[過去ログ]
【統計分析】機械学習・データマイニング11 [無断転載禁止]©2ch.net (1002レス)
【統計分析】機械学習・データマイニング11 [無断転載禁止]©2ch.net http://echo.5ch.net/test/read.cgi/tech/1482227795/
上
下
前
次
1-
新
通常表示
512バイト分割
レス栞
このスレッドは過去ログ倉庫に格納されています。
次スレ検索
歴削→次スレ
栞削→次スレ
過去ログメニュー
854: デフォルトの名無しさん [sage] 2017/01/16(月) 16:40:13.99 ID:qGPkeFbt 3年じゃないのかw http://echo.5ch.net/test/read.cgi/tech/1482227795/854
855: デフォルトの名無しさん [] 2017/01/16(月) 16:49:35.19 ID:h1Gia5xw 元々のDQNは、マミーってやつがFランの下の人間を指す語として定義した言葉だったんだよ Wikipediaでも昔のバージョンを見るとその旨が書いてある https://ja.wikipedia.org/w/index.php?title=DQN&oldid=31106522 http://echo.5ch.net/test/read.cgi/tech/1482227795/855
856: デフォルトの名無しさん [] 2017/01/16(月) 18:01:51.99 ID:xePMEW+E https://youtu.be/quIHgwuF6r4 http://echo.5ch.net/test/read.cgi/tech/1482227795/856
857: デフォルトの名無しさん [sage] 2017/01/16(月) 18:42:35.41 ID:xmT3FgHt DQNはDeep Q Networkの略です http://echo.5ch.net/test/read.cgi/tech/1482227795/857
858: デフォルトの名無しさん [] 2017/01/16(月) 20:36:38.91 ID:h1Gia5xw ただこのスレの住人は高卒モン卒の方のDQNだらけ http://echo.5ch.net/test/read.cgi/tech/1482227795/858
859: デフォルトの名無しさん [sage] 2017/01/16(月) 20:44:04.59 ID:msgU5aLq Deep Queen Netwoek http://echo.5ch.net/test/read.cgi/tech/1482227795/859
860: デフォルトの名無しさん [sage] 2017/01/16(月) 20:57:20.41 ID:Sf7E7n0Z >>852 これは! いやーきたね!! 逸材だぁ!!! http://echo.5ch.net/test/read.cgi/tech/1482227795/860
861: デフォルトの名無しさん [sage] 2017/01/16(月) 23:24:13.31 ID:dJ0UlAFz ベイズやSVMで20クラスほどのクラス分類をしているのですが、クロスバリデーションでは9割以上正解なのに テストデータでは3割とかになってしまうのは、どういう原因が考えられるでしょうか? 3週データを取得して1週目と3週目を学習データに、2週目をテストデータとしているので 学習データのオーバーフィッティング?もなく学習データとテストデータの性質もバランスが取れているはずなのですが それと、誤差要因を見出すには誤差項というのを検証するといいみたいなことを聞いたのですが、 ググると回帰分析の話が出てきますが、誤差項というのは連続性のないクラス分類でも検証できるものなのですか? http://echo.5ch.net/test/read.cgi/tech/1482227795/861
862: デフォルトの名無しさん [sage] 2017/01/16(月) 23:44:46.33 ID:H9G+c2UE >>861 1週目と3週目のデータで学習するとオーバフィッティングしないという理由が判りません 誤差って何と何の差ですか? http://echo.5ch.net/test/read.cgi/tech/1482227795/862
863: デフォルトの名無しさん [sage] 2017/01/17(火) 00:56:15.56 ID:tsbi2MJl >>862 音波とか電波とかを使った位置推定みたいなことをやってます ああ、過学習っていうのは細かく切り分けすぎみたいなやつですか 日によって外的要因などで変化があることを考慮して、 1週目だけに特化しないようできるだけ多いパターンのデータをとれるように 2回とったわけです(この作業はなんて言うんでしょうか?) 部屋をマス目上に区切ってそれぞれの地点をクラスとして、 正解と分類結果の位置の平面距離を誤差として扱っています http://echo.5ch.net/test/read.cgi/tech/1482227795/863
864: デフォルトの名無しさん [sage] 2017/01/17(火) 01:40:17.43 ID:fnrDgeqA >どういう原因が考えられるか そもそもちゃんと上手くいく補償は何もないはず http://echo.5ch.net/test/read.cgi/tech/1482227795/864
865: デフォルトの名無しさん [sage] 2017/01/17(火) 01:58:22.56 ID:tsbi2MJl >>864 クロスバリデーションではうまくいってるからむしろ逆に疑問なのです こういうことは往々にして起こるものなんでしょうか? 自作アプリケーションではなくWeka3を使ってるので、 クロスバリデーション時のデータの分割がおかしいとかいうことはないはずです もしやと思い一応データの順序をバラバラにして読み込ませてみましたが、変わらないですし http://echo.5ch.net/test/read.cgi/tech/1482227795/865
866: デフォルトの名無しさん [sage] 2017/01/17(火) 02:09:51.51 ID:4Zn+ZHnq >>865 別に珍しくも何ともない だからレスの反応も鈍い http://echo.5ch.net/test/read.cgi/tech/1482227795/866
867: デフォルトの名無しさん [sage] 2017/01/17(火) 02:41:54.24 ID:6FN76xWU 全てが上手くいけば苦労しないよ http://echo.5ch.net/test/read.cgi/tech/1482227795/867
868: デフォルトの名無しさん [sage] 2017/01/17(火) 06:25:04.80 ID:Upzxz6/t >>863 前処理を追加してみるとか 正規化とか標準化とか中心化とか 誤差の分散がクラス分けの分散より大きいから正しく分類されてないということは言えるだろう http://echo.5ch.net/test/read.cgi/tech/1482227795/868
869: デフォルトの名無しさん [sage] 2017/01/17(火) 06:59:26.60 ID:oG+VNPPp あなたのいうクロスバリデーションが1週目と3周目のデータを対象にしたってことならおかしくないんじゃないかと n週目、に区切るのが気持ち悪い データが週で偏ってるんでしょ 全体をシャッフルしてクロスバリデーションするならわかるけど http://echo.5ch.net/test/read.cgi/tech/1482227795/869
870: デフォルトの名無しさん [sage] 2017/01/17(火) 22:45:49.19 ID:fnrDgeqA >一応データの順序をバラバラにして読み込ませてみましたが、変わらないですし どういうことをしたの? 順序って何の順序? http://echo.5ch.net/test/read.cgi/tech/1482227795/870
871: デフォルトの名無しさん [sage] 2017/01/17(火) 23:03:02.32 ID:NwjbzAqk >>848 うわぁえげつねぇ、ググったら本当みたいね。もう tensorflow 1強で勝負にならねぇな… http://echo.5ch.net/test/read.cgi/tech/1482227795/871
872: デフォルトの名無しさん [sage] 2017/01/17(火) 23:04:31.07 ID:CnW57jrJ ミゲルがtensorflowのC#ラッパー書いてたなw http://echo.5ch.net/test/read.cgi/tech/1482227795/872
873: デフォルトの名無しさん [sage] 2017/01/17(火) 23:13:45.71 ID:50N4tk+s C# ラッパーは windowsプログラマに需要ありそう http://echo.5ch.net/test/read.cgi/tech/1482227795/873
874: デフォルトの名無しさん [sage] 2017/01/17(火) 23:16:07.66 ID:50N4tk+s kerasかTFかで悩む必要なくなるな あくまでTF内の話しになるわけだ http://echo.5ch.net/test/read.cgi/tech/1482227795/874
875: デフォルトの名無しさん [sage] 2017/01/17(火) 23:28:52.44 ID:AgXo0Iqi tensorflow 1強になりそうだな。 http://echo.5ch.net/test/read.cgi/tech/1482227795/875
876: デフォルトの名無しさん [] 2017/01/17(火) 23:34:20.80 ID:2pYNMMxB 競争の激しいところでは資本力が強いところが勝つ それだけのこと http://echo.5ch.net/test/read.cgi/tech/1482227795/876
877: デフォルトの名無しさん [sage] 2017/01/17(火) 23:40:32.56 ID:rIfocs2Z AWSの機械学習系のサービスは何使ってるんだろう AmazonはJava好きだからSparkかな http://echo.5ch.net/test/read.cgi/tech/1482227795/877
878: デフォルトの名無しさん [sage] 2017/01/17(火) 23:48:51.97 ID:NwjbzAqk EMR には Spark 入ってるけどな、あくまで Hadoop エコシステムの一つとして http://echo.5ch.net/test/read.cgi/tech/1482227795/878
879: デフォルトの名無しさん [sage] 2017/01/17(火) 23:50:47.76 ID:NwjbzAqk >>876 真理ではあるが、MS のフレームワークは成功しているとは言えないから やはりこの分野でのグーグルのブランド力もあるかと http://echo.5ch.net/test/read.cgi/tech/1482227795/879
880: デフォルトの名無しさん [sage] 2017/01/17(火) 23:54:39.00 ID:Yq4yq7rY AWSはJavaかC++で独自に自作してそう DBMSをいくつも独自に内製したりとか意味不明な技術力があるんだから機械学習くらい楽勝だろ http://echo.5ch.net/test/read.cgi/tech/1482227795/880
881: デフォルトの名無しさん [sage] 2017/01/18(水) 01:00:12.63 ID:A2sif1c9 和製Chainerがどこまで食い下がれるか http://echo.5ch.net/test/read.cgi/tech/1482227795/881
882: デフォルトの名無しさん [sage] 2017/01/18(水) 01:01:26.05 ID:pJi8eRzq >>866-870 ありがとうございます そういうもんなんですかね 前処理・分散について調べてみます 順序というのは、極端な例ですが AAABBBCCCDDDEEE(「A」はAに分類されるべきデータを表す)という15個のデータがあった場合、 これをそのまま5-foldに突っ込んだらAAA〜DDDで学習・EEEで検証みたいなことになったりしないかと思って (もちろんちゃんとしたソフトでそんなことはないと思いますが、念のため)手動で15個のデータをバラバラにしたということです http://echo.5ch.net/test/read.cgi/tech/1482227795/882
883: デフォルトの名無しさん [sage] 2017/01/18(水) 01:04:54.02 ID:fOnydPHH >>896の意見が一番需要なんだけど http://echo.5ch.net/test/read.cgi/tech/1482227795/883
メモ帳
(0/65535文字)
上
下
前
次
1-
新
書
関
写
板
覧
索
設
栞
歴
あと 119 レスあります
スレ情報
赤レス抽出
画像レス抽出
歴の未読スレ
Google検索
Wikipedia
ぬこの手
ぬこTOP
0.022s