[過去ﾛｸﾞ] 【統計分析】機械学習・データマイニング8©2ch.net (1002ﾚｽ)
上下前次1-新
このｽﾚｯﾄﾞは過去ﾛｸﾞ倉庫に格納されています｡
次ｽﾚ検索 歴削→次ｽﾚ 栞削→次ｽﾚ 過去ﾛｸﾞﾒﾆｭｰ
177: 2016/06/12(日)08:54 ID:hE/WfIPg(1) AAS
しらみ潰しで済むなら、それに越したことはない。
178(1): 2016/06/12(日)20:55 ID:vVZR4K/C(2/2) AAS
つながり見っけ
裏道どころかタイムズスクエアの真ん前にいたんですね
前のスレッドで「現在のDNNにおける未解決問題」というスライドを挙げたんですが
スピングラスの下りでの元ネタの一つです
Open Problem: The landscape of the loss surfaces of multilayer networks
外部ﾘﾝｸ[html]:www.jmlr.org
> Earlier theoretical analysis, conveniently reviewed in Dauphin et al. (2014), suggest the
> existence of a certain structure of critical points of random Gaussian error
> functions on high dimensional continuous spaces.
> ...
> Nevertheless they provide no theoretical justification for the existence of this connection.
読んでないので憶測ですが、Dauphinさん達の観察したモース指数と標高の関係を
スピングラスを使って導けるよという趣旨のようです
そのDauphinさん達の仕事です
Identifying and attacking the saddle point problem in high-dimensional non-convex optimization
外部ﾘﾝｸ[2572]:arxiv.org
これも読んでないのですが、これを紹介しているブログを読むと
>>65 の路線をそのまま発展させたか整理したもののようです
No more local minima?
外部ﾘﾝｸ:blog.terminal.com
>>65 は悪乗りで書いたんですが、色々とつながり勉強になりました
灯台下暗し
一旦突破口を見つけるとイナゴのようによってたかって片付けるNN48恐るべし
179: 2016/06/12(日)21:10 ID:YWOQehEL(1) AAS
がんばって論文書いてくれ、IEEEに載ったら読むよ
180: 2016/06/13(月)09:06 ID:BCwySWZU(1) AAS
Kerasまたインターフェース変えてこないか心配で、あんまり使い込みたくない
181(2): 2016/06/13(月)12:41 ID:EYgzInPD(1) AAS
Tensorflow使う人ってやっぱLinux？
182: 2016/06/13(月)13:10 ID:WTHdbxNZ(1) AAS
試行はMacで運用はLinuxじゃね
183: 2016/06/13(月)15:56 ID:Xq6/eTzo(1) AAS
>>181
windowsでvm linux
184: 2016/06/13(月)21:14 ID:1ohehUTc(1/2) AAS
>>181
仮想マシンもいい選択だと思うけど、こういう作戦はどうかな?
0. リナックス箱を買う
三万も出せば十分な箱が買えるのでは？
スマホだとセキュリティ上の制約が多いので不合理かも
ラズパイだと別の世界に行ってしまうかも
1. 開発はリナックス箱
天才以外は小さなデータを使った試行錯誤があると思う
コードの大部分は定型化しにくい雑多なデータ処理でバグの宝庫
2. 本ちゃんはクラウド
使った事ないけど高い機械を買うより安上がりでは？
結局、ここで仮想マシンを使うことになるのけど（ちゃんちゃん）
185: 2016/06/13(月)21:22 ID:1ahkFkzd(1) AAS
金あるならMac買った方が早い
186(2): 2016/06/13(月)22:19 ID:aVrC9ogK(1) AAS
俺はVPSで月１０００円のマシン借りてそこで適当なスクリプト動かしてる。
AWSとかでもいいんだけど、いくらになるかわからないからな
187: 2016/06/13(月)22:35 ID:R0RMs4bq(1/2) AAS
データ分析はやっぱり手元で軽く試して可視化までできないと面倒臭いよ
個人の勉強レベルならたいてい小規模な試行錯誤止まりでデスクトップで十分完結するレベルだし
188(1): 2016/06/13(月)22:36 ID:rH9xeHNR(1) AAS
>>186
公開しないのであればローカルでVM動かしたほうが費用も性能も良いんじゃない？
189: 2016/06/13(月)22:46 ID:R0RMs4bq(2/2) AAS
>>188
大規模な分析やるなら一時的にAWSでインスタンスを沢山立てて
早く結果出してすぐ止めるというのはよくある使い方だよ
マシン1台でバッチ処理に10時間かけるのも10台使って1時間で終わらせるのも費用は同じだからな
月契約のVPSだとそういう使い方できないからほとんどクラウドのメリットはないけど
190: 2016/06/13(月)22:47 ID:fedZzlGv(1/3) AAS
機械学習をローカルでやったら、時間かかりすぎでしょ
191: 2016/06/13(月)22:52 ID:fedZzlGv(2/3) AAS
GoogleのCloud Machine Learning使ってる人いる？
192(1): 2016/06/13(月)22:52 ID:+VixTmhk(1) AAS
仮想ＰＣはもうlinuxのインストールでつまづいた
193: 2016/06/13(月)22:55 ID:fedZzlGv(3/3) AAS
>>192
VirtualBoxをダウンロードしてきて、
ここからVHD落とせば、インストールする必要ないよ
外部ﾘﾝｸ:www.ubuntulinux.jp
194: 2016/06/13(月)23:33 ID:1ohehUTc(2/2) AAS
>>186 は魅力的な気がする
自分の案だと箱代に三万円かかってしまうけどこの方法だと半年六千円で済む
日本の都市部では場所代が高いけどその心配もない
バッテリーが爆発する心配もない
トイレでテストランすることもできる
問題は出力をどうするか？だと思うけど
tensorboard等で済むなら検討する価値ありでは？
面倒くさいかな？
クラウドに持っていった時には避けられない問題なので二度手間にはならないかも
195: 2016/06/14(火)00:03 ID:FEt974t9(1/2) AAS
最初は普通に AWS でやればいいじゃん…
196: 2016/06/14(火)01:48 ID:PqQxjTVo(1) AAS
このスレはそんなに大量のデータを処理するようなことをやってる人もいるんだな
俺はそれ以前でつまづいてる
197(2): 2016/06/14(火)08:49 ID:E/X2uVE+(1/2) AAS
Twitterクロールした結果をmongoDBに格納してる人が多いみたいだけど何で？
Sqliteじゃダメなの？
198: 2016/06/14(火)09:51 ID:WBTeiyy3(1) AAS
>>157
カブドットコム、ＡＩで調査リポート 中小型銘柄を１分で
外部ﾘﾝｸ:www.nikkei.com
199: 2016/06/14(火)12:30 ID:GDTle/SJ(1) AAS
>>197
・JSONを無加工で突っ込めるから
・意識高い系の間ではRDBダサい時代遅れみたいな風潮があるから
ドキュメントDBはシーケンシャルリードがクソ遅いからデータ分析には向かないよ
とりあえずドキュメントDBに溜めとく場合はあとでバッチで列指向DBとかにロードしてから分析にかけるのが定番
200: 2016/06/14(火)12:32 ID:uCIWlGCy(1) AAS
>>197
多くても安心w
スキーマレス
201(1): 2016/06/14(火)12:41 ID:usFCVOE6(1) AAS
twitterってクロールしても、ゴミしかなくね？
202: 2016/06/14(火)12:49 ID:UOEP8MuS(1) AAS
MongoみたいなドキュメントDBはWebアプリとかで大量の個別の更新を並列にさばくのに適していて、
ただ溜めるだけならJSONをスキーマレスでそのまま突っ込めること以外にはあまりメリットはないよ
分析を第一に考えるならPostgreSQLのjsonbに突っ込むのがバランスいいんじゃないかな
スキーマレスだしSQLの機能性を犠牲にしなくていいし読み出し速いし
もっとガチな規模だとRedshiftとかHBaseとかになるけど
203: 2016/06/14(火)13:05 ID:FEt974t9(2/2) AAS
Spark, Presto とかの分散型で分析するなら MongoDB はコネクタがあるので選択肢の一つにはなるかも
自分は Cassandra 使ってるけど
204: 2016/06/14(火)15:56 ID:Xw3W+KJl(1) AAS
>>201
良く気付いたな
えらいぞお前
205: 2016/06/14(火)17:06 ID:Z6F3Hcel(1) AAS
Twitterも数年前までは面白いbotがあったけど、いまは何もないな。
206(1): 2016/06/14(火)22:26 ID:E/X2uVE+(2/2) AAS
参議院選挙期間中は大学教員は政治活動禁止らしいのだが
Twitter Botが勝手に政治発言するのは良いよね？
Twitterﾘﾝｸ:beliefjustworld
上下前次1-新書関写板覧索設栞歴
あと 796 ﾚｽあります
ｽﾚ情報 赤ﾚｽ抽出 画像ﾚｽ抽出 歴の未読ｽﾚ
ぬこの手 ぬこTOP 0.023s