[過去ログ] 【統計分析】機械学習・データマイニング22 (1002レス)
上下前次1-新
このスレッドは過去ログ倉庫に格納されています。
次スレ検索 歴削→次スレ 栞削→次スレ 過去ログメニュー
560(2): (ワッチョイ 02ad-J+LR) 2019/02/10(日)20:49 ID:spsEs2Cn0(1) AAS
最近勉強し始めた超初心者だけど、なんとか学習モデル生成出来るとこまできた
(ほとんど参考サイトのコピペだけど…)
が、マシンスペックが全然足りなくて学習が進まない…
↓この参考サイトの著者は100epochsで12時間かかったらしいが、俺は7時間かけて2epochsだけ
外部リンク:app.m-cocolog.jp
「ちょっと自分でモデル作って味見してみようかな」っ人には着手しづらいなぁ
561(1): (ワッチョイ 7d35-OF6d) 2019/02/10(日)21:00 ID:Z3H3Tv4Q0(4/6) AAS
>>560
cpuで動かしてない?
tensorflowがgpuで動いてるか試してみて
from tensorflow.python.client import device_lib
device_lib.list_local_devices()
外部リンク:qiita.com
562(1): (ササクッテロ Spd1-gzwS) 2019/02/10(日)21:03 ID:L/vUvPOUp(3/3) AAS
>>560
そこそこ良いGPUないと面白さは半減だねぇ
Google Colaboratryでもいいけど長い時間の学習は処理を分割させる必要があるし、画像系はデータが巨大になりがちだし、趣味でやるには少しハードル高いよね
563(1): (ワッチョイ 7d35-OF6d) 2019/02/10(日)21:07 ID:Z3H3Tv4Q0(5/6) AAS
ColaboratryのGPU性能はGTX970ぐらいだったかな
結構微妙な性能な上に、制約が多いから買ったほうが良い
TPU使えるなら凄いんだけど、俺は無理だった
564(1): (ワッチョイ 0202-RyKv) 2019/02/10(日)21:35 ID:7aqx1gb30(1/2) AAS
ColaboravoryでTPU使うのにただ切り替えるだけじゃだめなんだよね
あれ使えればかなり楽になると思うし体験してみたいけどそれ用にコード変更しなくちゃいけないんでしょ
565(1): (ワッチョイ 7d35-OF6d) 2019/02/10(日)21:41 ID:Z3H3Tv4Q0(6/6) AAS
>>564
一から書ける技量が無いと対応できない
githubに転がってるやつをちょっと変えれる程度じゃ無理
データも容量的に厳しいので、googleドライブにおいてそこからapiでひっぱってきて・・・とかなり面倒
その内ラッパーとか出来ると思うけどね
566: (ワッチョイ 0202-RyKv) 2019/02/10(日)22:44 ID:7aqx1gb30(2/2) AAS
>>565
そうか残念
拾ったCycleGANのコード動かそうとしたら重くなって落ちたからTPUでやってみたかったんだけどね
ところでcolaboratoryでコードの出力欄に四角いダメ顔マーク出てくるのはなんの意味なんだろうか
メモリ不足?
567: (アウアウイー Sa91-mimx) 2019/02/11(月)07:49 ID:hy2CndF0a(1) AAS
>>553
それ使ってる環境しだいだよ。胆くするブラウザ使ってるから。
568(2): (アウアウウー Sa05-FtKs) 2019/02/11(月)13:15 ID:/CQzGcw7a(1) AAS
機械学習とAIの違い
画像リンク
569(1): (ワッチョイ 7dad-JcLr) 2019/02/11(月)13:19 ID:pkTvfEUJ0(1/3) AAS
>>563
嘘乙 Tesla K80 12GBだろ。GTX970の速度じゃない事くらい試せばすぐ分かる。
570: (ワッチョイ 02ad-J+LR) 2019/02/11(月)13:34 ID:QSAhduNJ0(1/2) AAS
>>561
cpuでやってました!
gpu版になんとか設定したものの新たなエラーが出て四苦八苦中ですw
571: (ワッチョイ 02ad-J+LR) 2019/02/11(月)13:38 ID:QSAhduNJ0(2/2) AAS
>>562
5年くらい前に組んだPCでゲームはやらずマルチディスプレイが出来ればいいので、安物グラボ積んでます…
玄人志向GTX650で当時5000円ぐらいだったような
画像リンク
572(1): (ワッチョイ 7d35-OF6d) 2019/02/11(月)13:39 ID:fMjwAL+60(1) AAS
>>569
こないだ暇だったからmnistで計測してみたから間違いない
スペックも実測値も、ほぼGTX960〜GTX970当たりの性能
K80のGPUが1/2になる事を考慮すると、スペック的にも大体合うはず
573(1): (ワッチョイ 7dad-JcLr) 2019/02/11(月)13:58 ID:pkTvfEUJ0(2/3) AAS
>>572
それはすまない。GTX1060Tiよりも速かったので、俺の組み方が悪かったのだろうな。メモリが少なかったせいかもしれない。
574: (ワッチョイ f901-A0Bz) 2019/02/11(月)16:51 ID:OF3/TB8A0(1) AAS
mnistとかなんのベンチマークにもならんわ。imagenetくらい回してくれ。
575(1): (ワッチョイ 8d83-Q2RD) 2019/02/11(月)17:06 ID:UQjSOk2h0(1) AAS
GPUに辿り着く以前にラーニングの前処理で異様に時間がかかる
ひょっとしてcolaboratoryのCPU1コア?
データ読み込んで特徴量増やしてるだけなんだが・・・
576: (ワッチョイ 7dad-JcLr) 2019/02/11(月)17:38 ID:pkTvfEUJ0(3/3) AAS
>>575
zip解凍も結構時間かかってるよ。CPUやファイルアクセスは貧弱っぽい。
577: (ササクッテロ Spd1-gzwS) 2019/02/11(月)19:02 ID:rLkbUlECp(1) AAS
>>573
モデルによるかな
小さなモデルでバッチサイズ大きめな学習はK20速いけどモデルが大きくなると遅い
578: (ワッチョイ 6e1f-feI+) 2019/02/11(月)19:32 ID:TvLOMK+p0(1) AAS
>>568
ネタなのは分かるけど、共感できなくてどこがおもしろいのかわからない
579: (ワッチョイ 8dda-/WZR) 2019/02/11(月)19:40 ID:JjM5yhDQ0(1) AAS
>>568
Correction
If it is written by Kyoto Common Lisp, it maybe AI.
580: (ワッチョイ c61a-uR/r) 2019/02/12(火)00:17 ID:KEdHt1PV0(1) AAS
>>552
いや会社でIEとedgeでしかブラウザ使えないからchromeもvivaldiも使えなくて困ってるのよ
もちろん、家では普通にchromeで読めるんだけどな
581(1): (ワッチョイ bdc3-EwQo) 2019/02/12(火)03:51 ID:xDY2FToe0(1) AAS
まず何から始めればいいの?
なんちゃって理系で高校で数?Cまではやったけど数学がとても苦手
とりあえず機械学習のための数学って本は買った
582: (ワッチョイ cd81-974c) 2019/02/12(火)03:57 ID:fVFjrefg0(1) AAS
大して知らない人だが。
大して数学しらなくてもできるとはおもうが。
数学部分はライブラリに内蔵されてて、ブラックボックスでも操作はできるかと。
環境設定と動かし方では。
583: (バットンキン MM52-mLVc) 2019/02/12(火)08:02 ID:1fWnXhSnM(1) AAS
何やりたいかによる
584: (ワッチョイ 225c-Mamb) 2019/02/12(火)08:59 ID:m4F+G7YU0(1) AAS
英語の勉強
585: (ワッチョイ 8dda-/WZR) 2019/02/12(火)09:00 ID:XOcmOfNJ0(1) AAS
機械学習
586(2): (ワッチョイ e1da-/WZR) 2019/02/12(火)11:12 ID:npGO6Ivm0(1) AAS
大事なのは「読む」力だ!〜4万人の読解力テストで判明した問題を新井紀子・国立情報学研究所教授に聞く
外部リンク:news.yahoo.co.jp
論理的に考えろと言ってるだけw
587: (ワッチョイ 7d35-OF6d) 2019/02/12(火)11:27 ID:sv506HrS0(1/4) AAS
>>581
まず
・目的
を決める
mnist(チュートリアル)なら後述のグラボは無しでも良い
・予算の設定
mnist以降はグラボ必須
既にあるならそれを使えば良いが、無ければ買う必要がある
無いままやろうとすると人生が終わるゾ
・環境設定
ある意味恐らく一番の難関
windows、mac、linux、それぞれで設定の仕方が違う
とにかく最初は聞きまくり検索しまくりながら気合でやりきる
588(1): (ワッチョイ fe7c-DOJB) 2019/02/12(火)12:07 ID:8lolhehX0(1/2) AAS
>>586
2・3日前にテレビの報道特集みたいなやつでそれやってたわ
言葉の定義があいまいなまま中学校で教育してるのが問題らしい
教師のレベルが全国的に可笑しいんだろうな
589: (スフッ Sd22-JzIx) 2019/02/12(火)12:41 ID:qHcaHQyCd(1/3) AAS
ディープラーニングには
CNNだのRNNだのLSTMだのオートエンコーダだのGANだの色んなアルゴリズムがありますけど
「よくこんなに色々と考えるよなあ」と感心しますよ!
考えた人、天才かよ!
上下前次1-新書関写板覧索設栞歴
あと 413 レスあります
スレ情報 赤レス抽出 画像レス抽出 歴の未読スレ
ぬこの手 ぬこTOP 0.017s