[過去ﾛｸﾞ] 【統計分析】機械学習・データマイニング8©2ch.net (1002ﾚｽ)
上下前次1-新
このｽﾚｯﾄﾞは過去ﾛｸﾞ倉庫に格納されています｡
次ｽﾚ検索 歴削→次ｽﾚ 栞削→次ｽﾚ 過去ﾛｸﾞﾒﾆｭｰ
194: 2016/06/13(月)23:33 ID:1ohehUTc(2/2) AAS
>>186 は魅力的な気がする
自分の案だと箱代に三万円かかってしまうけどこの方法だと半年六千円で済む
日本の都市部では場所代が高いけどその心配もない
バッテリーが爆発する心配もない
トイレでテストランすることもできる
問題は出力をどうするか？だと思うけど
tensorboard等で済むなら検討する価値ありでは？
面倒くさいかな？
クラウドに持っていった時には避けられない問題なので二度手間にはならないかも
195: 2016/06/14(火)00:03 ID:FEt974t9(1/2) AAS
最初は普通に AWS でやればいいじゃん…
196: 2016/06/14(火)01:48 ID:PqQxjTVo(1) AAS
このスレはそんなに大量のデータを処理するようなことをやってる人もいるんだな
俺はそれ以前でつまづいてる
197(2): 2016/06/14(火)08:49 ID:E/X2uVE+(1/2) AAS
Twitterクロールした結果をmongoDBに格納してる人が多いみたいだけど何で？
Sqliteじゃダメなの？
198: 2016/06/14(火)09:51 ID:WBTeiyy3(1) AAS
>>157
カブドットコム、ＡＩで調査リポート 中小型銘柄を１分で
外部ﾘﾝｸ:www.nikkei.com
199: 2016/06/14(火)12:30 ID:GDTle/SJ(1) AAS
>>197
・JSONを無加工で突っ込めるから
・意識高い系の間ではRDBダサい時代遅れみたいな風潮があるから
ドキュメントDBはシーケンシャルリードがクソ遅いからデータ分析には向かないよ
とりあえずドキュメントDBに溜めとく場合はあとでバッチで列指向DBとかにロードしてから分析にかけるのが定番
200: 2016/06/14(火)12:32 ID:uCIWlGCy(1) AAS
>>197
多くても安心w
スキーマレス
201(1): 2016/06/14(火)12:41 ID:usFCVOE6(1) AAS
twitterってクロールしても、ゴミしかなくね？
202: 2016/06/14(火)12:49 ID:UOEP8MuS(1) AAS
MongoみたいなドキュメントDBはWebアプリとかで大量の個別の更新を並列にさばくのに適していて、
ただ溜めるだけならJSONをスキーマレスでそのまま突っ込めること以外にはあまりメリットはないよ
分析を第一に考えるならPostgreSQLのjsonbに突っ込むのがバランスいいんじゃないかな
スキーマレスだしSQLの機能性を犠牲にしなくていいし読み出し速いし
もっとガチな規模だとRedshiftとかHBaseとかになるけど
203: 2016/06/14(火)13:05 ID:FEt974t9(2/2) AAS
Spark, Presto とかの分散型で分析するなら MongoDB はコネクタがあるので選択肢の一つにはなるかも
自分は Cassandra 使ってるけど
204: 2016/06/14(火)15:56 ID:Xw3W+KJl(1) AAS
>>201
良く気付いたな
えらいぞお前
205: 2016/06/14(火)17:06 ID:Z6F3Hcel(1) AAS
Twitterも数年前までは面白いbotがあったけど、いまは何もないな。
206(1): 2016/06/14(火)22:26 ID:E/X2uVE+(2/2) AAS
参議院選挙期間中は大学教員は政治活動禁止らしいのだが
Twitter Botが勝手に政治発言するのは良いよね？
Twitterﾘﾝｸ:beliefjustworld
207(1): 2016/06/15(水)01:14 ID:si8IeJpA(1) AAS
プログラム間違っててもバックプロバケーションは誤差が低下していきやすいのは何でなんだ
208(1): 2016/06/15(水)05:37 ID:khLjIJ21(1) AAS
>>207
間違いによるんじゃね
209: 2016/06/15(水)22:34 ID:rC9K6t2a(1) AAS
ツイッターネタ: MachineLearning: search results - twitter
外部ﾘﾝｸ:www.reddit.com
この中ではバックプロパガンダが気になってしょうがない
>>208 に一票で関連性は？だけど題名が面白いので
Learning to learn by gradient descent by gradient descent
外部ﾘﾝｸ:www.reddit.com
レディっとはよく知られていているのでもう貼らないけど
興味が持てて短文が多いので英語の学習教材としていいかも
210: 2016/06/17(金)11:49 ID:DHRGSGv5(1) AAS
これからは人工脳SOINN
211: 2016/06/17(金)17:28 ID:Z9Ymgj5s(1) AAS
SOINNをNGに入れることにした
212: 2016/06/17(金)20:00 ID:MxTb5Tiu(1) AAS
テスト
SOINN
213(1): 2016/06/17(金)21:09 ID:oGfcIJpE(1) AAS
活性化関数が曲線だとどの層にどんな影響してんのかよくわかんね
214: 2016/06/17(金)21:19 ID:9I7kzKqq(1) AAS
$◯!NN
215: 2016/06/17(金)22:26 ID:7+eHqEpf(1/4) AAS
>>213
自分で活性化関数を線形にした時とシグモイド関数とかにした時で試してみれば？
216(3): 2016/06/17(金)22:44 ID:MLohMZBM(1) AAS
交差検証の定義についてですが、たとえばA〜Jに分類される10個ずつ計100個のデータを5分割で検証する場合、
A1〜8、B1〜8…の80個で学習してA9〜10、B9〜10…の20個で評価
…
A3〜10、B3〜10…の80個で学習してA1〜2、B1〜2…の20個で評価
とするということで合っていますか？
217(1): 2016/06/17(金)22:51 ID:7+eHqEpf(2/4) AAS
>>216
ABで評価C-Jで学習
BCで評価D-Aで学習
とかで良いんじゃないの？
て優香5分割なのに何で10分割してあるの？
218(2): 2016/06/17(金)22:55 ID:7+eHqEpf(3/4) AAS
>>216
A-Jに分類されるのか
全体からランダムにサンプリングして5グループを作って
4グループで学習して残りで評価とかじゃね？
均等に分けると人為的じゃないかな
219(2): 2016/06/17(金)23:19 ID:aIqlEthT(1) AAS
>>218
復元抽出でグループ作るって意味ならそれ交差検査じゃなくてブートストラップじゃないの
220(1): 2016/06/17(金)23:45 ID:7+eHqEpf(4/4) AAS
>>219
復元しないで
221(1): 2016/06/18(土)00:03 ID:2jG1WJNX(1) AAS
>>217-220
ありがとうございます
どこに分類される(べき)かは気にせずに完全にランダムで5分割すればいいんですね
4グループで学習して1グループで評価(学習は5グループではない)を5回というのは合っているのですね
222: 2016/06/18(土)03:08 ID:2u2TtX6Z(1/2) AAS
>>221
実装上はシャッフルして5等分とかでいいかも
評価用を変えて5回評価するのであってる
223: 2016/06/18(土)10:00 ID:H0ncRBu0(1) AAS
>>216
A〜Rもやっておけよ。
上下前次1-新書関写板覧索設栞歴
あと 779 ﾚｽあります
ｽﾚ情報 赤ﾚｽ抽出 画像ﾚｽ抽出 歴の未読ｽﾚ
ぬこの手 ぬこTOP 0.033s