[過去ﾛｸﾞ]
【オセロ,将棋】ボードゲーム Part2【囲碁,War】 (1002ﾚｽ)
【オセロ,将棋】ボードゲーム Part2【囲碁,War】 http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/
上
下
前
次
1-
新
通常表示
512ﾊﾞｲﾄ分割
ﾚｽ栞
このｽﾚｯﾄﾞは過去ﾛｸﾞ倉庫に格納されています｡
次ｽﾚ検索
歴削→次ｽﾚ
栞削→次ｽﾚ
過去ﾛｸﾞﾒﾆｭｰ
44: 535 [sage] 2017/11/01(水) 00:19:41.19 ID:M72WSH0d 囲連星のDB全部vec_tに変換したらメモリパンクした＾＾ 学習しないな俺ｗ マジでスレッドリッパーに128GB積みたい気分 http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/44
45: 535 [sage] 2017/11/01(水) 00:42:51.08 ID:M72WSH0d データ減らしたら動き始めました。 でも遅いな〜こりゃそう簡単には終わらんぞorz. まあ今晩一晩流してみますが… http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/45
46: 310 [sage] 2017/11/01(水) 01:06:46.90 ID:FDjtq7R7 バラして部分づつ学習する手もあるかも。 あ、元データはランダムに並び替えた方が良いですよ。 わかってると思いますが。 こちらは、しばらく強化学習していたら、それなりに学習が進んだ結果、 対戦相手側の手のばらつきが足りなくなって、局所解に陥ってた感じ。 急きょばらつきを広げて学習再開させたところです。 バリューの方は地道に損失が減っているんだけど、ポリシーの損失が 増えてきた。ポリシーはsigmoidがあるので、ウェイトが絶対値でとてつも なく大きくなって、なかなか修正しきれない状況になってるかもしれない。 一旦リセットすべきか悩み中。 http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/46
47: 535 [sage] 2017/11/01(水) 19:51:55.33 ID:M72WSH0d １エポック5000秒、しかも損失があんまり減っていかないorz これはかなり厳しい http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/47
48: 535 [sage] 2017/11/01(水) 20:00:50.18 ID:M72WSH0d ネットワークの大幅な簡素化が必要か？ でも今のネットワークでも損失が減っていかないところを見るとそれも望み薄かなぁ http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/48
49: 310 [sage] 2017/11/01(水) 20:13:34.50 ID:A50hx8cn たぶん、損失の減り方は最初はゆっくりだと思います。 「特徴抽出しながら」誤差修正していってますから。 僕と同じ悩みですね。 ネットワークの大幅簡素化の結果、最終的に線形回帰まで戻ってしまいました（汗 もっとも、オセロはBuroさんの特徴抽出があったから線形回帰まで戻れたのですが。 スリッパとGPUが呼んでます（笑） でも、もしかしたらAMDよりINTELの方が良いかもしれない。 高いけど。 http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/49
50: 535 [sage] 2017/11/01(水) 23:16:09.92 ID:M72WSH0d 簡素化してみました。 １エポック６５０秒位。 損失はあんまり減っていかない。 うーん。 http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/50
51: 535 [sage] 2017/11/01(水) 23:18:55.84 ID:M72WSH0d >>49 買うとしてもZen+まで待ちます。 http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/51
52: 535 [sage] 2017/11/02(木) 20:54:58.92 ID:PGhNTWut ６０エポック回したけど損失減らずorz くそ〜どうすりゃいいのさ http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/52
53: 535 [sage] 2017/11/02(木) 21:57:25.36 ID:PGhNTWut ライフゲーム囲碁は結構損失減ったのになぜ囲連星はあんまり損失が減らないんだろう？ 入力のサイズがでかいのは確かにあるけど。 http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/53
54: 535 [sage] 2017/11/02(木) 22:35:50.49 ID:PGhNTWut 石を中央寄せにして19x19の盤面を9x9くらいに削ってみるか… http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/54
55: 535 [sage] 2017/11/02(木) 23:58:27.26 ID:PGhNTWut お、損失ちょっと減った。 これで一晩回してみるか http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/55
56: 535 [sage] 2017/11/03(金) 20:29:00.55 ID:MdRaqfZr うーん。学習率がでかすぎるっぽい? http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/56
57: 535 [sage] 2017/11/03(金) 20:40:20.21 ID:MdRaqfZr ユニット数少な目段数多めがいいみたい? http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/57
58: 535 [sage] 2017/11/03(金) 21:52:31.44 ID:MdRaqfZr ミニバッチサイズも何気に速度に影響ありですねぇ ここでもパラメータいじりの沼か。。。 http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/58
59: 535 [sage] 2017/11/04(土) 20:21:38.30 ID:N2Ul/N+d あかん、まったく使い物にならないっぽい。orz 学習が足りないだけなのか根本的に無理筋なのか。。。 http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/59
60: 535 [sage] 2017/11/04(土) 21:18:12.47 ID:N2Ul/N+d 勝率予想だからダメなのか？ 次の一手予想のほうがいいんだろか？ うーん。 http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/60
61: 535 [sage] 2017/11/04(土) 22:07:45.27 ID:N2Ul/N+d あとは畳み込み試してないか… 畳み込みに賭けるか… http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/61
62: 535 [sage] 2017/11/05(日) 00:31:37.24 ID:BZBdQob/ お、畳み込み動いた。 後はどれだけ損失が減ってくれるかだな… http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/62
63: 310 [sage] 2017/11/05(日) 01:04:52.45 ID:BooXEMcV 同じ道をたどってますね（汗 こちらは、MCTSで構築したツリーを使って、完全読み切りが速くならないか 試していますが、謎のバグのオンパレードでかなり戦線縮小。一応、それなり に動作するレベルまで撤退してテストしていますが、なんとなく速度アップは している模様。 ただ、バグの過程で置換表データに変なものが混じったらしく、学習させると 異常終了になります。記譜は１７００件くらい集まっているので、一旦全消去して しまいました。 http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/63
64: 310 [sage] 2017/11/05(日) 17:40:16.26 ID:BooXEMcV ツリー探査がおかしくなる状態を確認。 けど、カーっとなって即座に終了してしまったので、詳細判明せず。 なんとなく症状は見えたので、しばらく目視デバッグします。 というか、これにより直近に遡りチェックやった記譜の正確さに不安が生じてます。 やけに遡りチェックが簡単に通るなぁと思っていたけど、これが原因かもしれない。 というわけでタイムアウトまで行った記譜を５０件ほど再チェックしなきゃならん。 全部で５４時間くらいかかる予想。今週はまるまるパーになりそうです。 その分、良質な置換表データが補えるんだけど。 http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/64
65: 310 [sage] 2017/11/05(日) 17:50:28.12 ID:BooXEMcV 計算間違い。全部で８０時間くらいだorz http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/65
66: 535 [sage] 2017/11/05(日) 20:13:01.98 ID:BZBdQob/ 畳み込み駄目でしたorz くそ〜ディープラーニングからは一時撤退するか… http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/66
67: 310 [sage] 2017/11/05(日) 23:36:09.29 ID:BooXEMcV ぬがーーーーーーーーーーーー！ バグって、記譜データがすべて上書きされて消えてしまったorz ツリー利用探索のデバッグ用にput処理にエラートラップ仕掛けた時に やっちゃいました。 学習済のデータが残っているのだけが救いだ・・・。 ここから記譜作ると、そこそこ精度が良い記譜になるはずなのが救いだ…。 http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/67
68: 535 [sage] 2017/11/06(月) 20:40:50.16 ID:opZqsFg1 バックアップ取れしｗ 一回コード全飛ばししてるでしょうに。 http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/68
69: 535 [sage] 2017/11/06(月) 21:50:55.01 ID:opZqsFg1 アルファ碁Zeroの手法まねできないかなぁ でも論文読んでもわかんねぇだろうなぁ ていうかGoogleがライブラリとして公開してくんねかなぁｗ（他力本願） http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/69
70: 310 [sage] 2017/11/07(火) 15:06:28.24 ID:8EOI4Ksy >>68 おっしゃる通りですorz 評価関数の方は要所要所でコピー残していたのに、記譜はなめてました。 >>69 ライブラリ公開されても、実行できる環境構築の方がハードル高いかなと。 論文はいまだに読んでいませんが、rollout無し（バリューネットに１００％依存） はうまく機能しています。圧倒的にツリー探索性能がアップしているため、評価関数 の精度の低さを、力技でカバーしている感じですが。 とはいえまだ３０手以前の評価値はでたらめに近い状態なので頻繁に間違えます。 強化学習でここまで治るのにどれくらいの時間がかかるのかは不明。後ろの方の 精度が上がらないと、前の方は間違った学習を繰り返すことになりますので。 後ろの方の評価関数がそこそこまともになったので、読み切り処理や遡りチェックの 時間はかなり早くなりました。タイムアウト１時間設定で時々空白３１マスまで遡れる ようになってきています。 http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/70
71: 535 [sage] 2017/11/09(木) 21:31:59.52 ID:H3GhZh8x とりあえず、ディープラーニングは一時中断します。 囲連星の序盤のDBは非常にうまく動いてるので、 終盤もDBを生かせないか検討中です。 それと同時にLV3 vs LV3の棋譜取も再開しました。 データは多いほどいいので。 あと310さんの遡りチェックというワードが気になってます。 例えば囲連星の終盤DB作るときにどこから勝負ありの状態になったか チェック出来たらどうだろう。とか考えています。 http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/71
72: 535 [sage] 2017/11/10(金) 23:45:05.32 ID:8vC+UsNi 天頂７買ってみました。 ９段に５子置きで勝てましたが４子で勝つのは相当厳しそう。 天頂６より「あ〜そこ大きそうだよね」ってところを的確に打ってくるみたいです。 http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/72
73: 535 [sage] 2017/11/12(日) 20:00:47.41 ID:UqBtKmZ3 終盤DBの試作、作ってみましたがあんまり上手く動いてないみたい。 データが終局までの手数しかないのがまずいのかも。 http://mevius.5ch.net/test/read.cgi/gamedev/1508056498/73
ﾒﾓ帳
(0/65535文字)
上
下
前
次
1-
新
書
関
写
板
覧
索
設
栞
歴
あと 929 ﾚｽあります
ｽﾚ情報
赤ﾚｽ抽出
画像ﾚｽ抽出
歴の未読ｽﾚ
Google検索
Wikipedia
ぬこの手
ぬこTOP
0.010s