[過去ﾛｸﾞ] 【オセロ,将棋】ボードゲーム Part2【囲碁,War】 (1002ﾚｽ)
上下前次1-新
このｽﾚｯﾄﾞは過去ﾛｸﾞ倉庫に格納されています｡
次ｽﾚ検索 歴削→次ｽﾚ 栞削→次ｽﾚ 過去ﾛｸﾞﾒﾆｭｰ
43: 535 2017/10/29(日)18:55 ID:zJx7nuOS(2/2) AAS
AIに組み込んでみましたが全く強くなってないですｗ
そういえば、ライフゲーム囲碁はDBつかっても強くならないんだったｗｗ
囲連星に転進するか…
44: 535 2017/11/01(水)00:19 ID:M72WSH0d(1/6) AAS
囲連星のDB全部vec_tに変換したらメモリパンクした＾＾
学習しないな俺ｗ
マジでスレッドリッパーに128GB積みたい気分
45: 535 2017/11/01(水)00:42 ID:M72WSH0d(2/6) AAS
データ減らしたら動き始めました。
でも遅いな〜こりゃそう簡単には終わらんぞorz.
まあ今晩一晩流してみますが…
46: 310 2017/11/01(水)01:06 ID:FDjtq7R7(1) AAS
バラして部分づつ学習する手もあるかも。
あ、元データはランダムに並び替えた方が良いですよ。
わかってると思いますが。
こちらは、しばらく強化学習していたら、それなりに学習が進んだ結果、
対戦相手側の手のばらつきが足りなくなって、局所解に陥ってた感じ。
急きょばらつきを広げて学習再開させたところです。
バリューの方は地道に損失が減っているんだけど、ポリシーの損失が
増えてきた。ポリシーはsigmoidがあるので、ウェイトが絶対値でとてつも
なく大きくなって、なかなか修正しきれない状況になってるかもしれない。
一旦リセットすべきか悩み中。
47: 535 2017/11/01(水)19:51 ID:M72WSH0d(3/6) AAS
１エポック5000秒、しかも損失があんまり減っていかないorz
これはかなり厳しい
48: 535 2017/11/01(水)20:00 ID:M72WSH0d(4/6) AAS
ネットワークの大幅な簡素化が必要か？
でも今のネットワークでも損失が減っていかないところを見るとそれも望み薄かなぁ
49(1): 310 2017/11/01(水)20:13 ID:A50hx8cn(1) AAS
たぶん、損失の減り方は最初はゆっくりだと思います。
「特徴抽出しながら」誤差修正していってますから。
僕と同じ悩みですね。
ネットワークの大幅簡素化の結果、最終的に線形回帰まで戻ってしまいました（汗
もっとも、オセロはBuroさんの特徴抽出があったから線形回帰まで戻れたのですが。
スリッパとGPUが呼んでます（笑）
でも、もしかしたらAMDよりINTELの方が良いかもしれない。
高いけど。
50: 535 2017/11/01(水)23:16 ID:M72WSH0d(5/6) AAS
簡素化してみました。
１エポック６５０秒位。
損失はあんまり減っていかない。
うーん。
51: 535 2017/11/01(水)23:18 ID:M72WSH0d(6/6) AAS
>>49
買うとしてもZen+まで待ちます。
52: 535 2017/11/02(木)20:54 ID:PGhNTWut(1/4) AAS
６０エポック回したけど損失減らずorz
くそ〜どうすりゃいいのさ
53: 535 2017/11/02(木)21:57 ID:PGhNTWut(2/4) AAS
ライフゲーム囲碁は結構損失減ったのになぜ囲連星はあんまり損失が減らないんだろう？
入力のサイズがでかいのは確かにあるけど。
54: 535 2017/11/02(木)22:35 ID:PGhNTWut(3/4) AAS
石を中央寄せにして19x19の盤面を9x9くらいに削ってみるか…
55: 535 2017/11/02(木)23:58 ID:PGhNTWut(4/4) AAS
お、損失ちょっと減った。
これで一晩回してみるか
56: 535 2017/11/03(金)20:29 ID:MdRaqfZr(1/3) AAS
うーん。学習率がでかすぎるっぽい?
57: 535 2017/11/03(金)20:40 ID:MdRaqfZr(2/3) AAS
ユニット数少な目段数多めがいいみたい?
58: 535 2017/11/03(金)21:52 ID:MdRaqfZr(3/3) AAS
ミニバッチサイズも何気に速度に影響ありですねぇ
ここでもパラメータいじりの沼か。。。
59: 535 2017/11/04(土)20:21 ID:N2Ul/N+d(1/3) AAS
あかん、まったく使い物にならないっぽい。orz
学習が足りないだけなのか根本的に無理筋なのか。。。
60: 535 2017/11/04(土)21:18 ID:N2Ul/N+d(2/3) AAS
勝率予想だからダメなのか？
次の一手予想のほうがいいんだろか？
うーん。
61: 535 2017/11/04(土)22:07 ID:N2Ul/N+d(3/3) AAS
あとは畳み込み試してないか…
畳み込みに賭けるか…
62: 535 2017/11/05(日)00:31 ID:BZBdQob/(1/2) AAS
お、畳み込み動いた。
後はどれだけ損失が減ってくれるかだな…
63: 310 2017/11/05(日)01:04 ID:BooXEMcV(1/4) AAS
同じ道をたどってますね（汗
こちらは、MCTSで構築したツリーを使って、完全読み切りが速くならないか
試していますが、謎のバグのオンパレードでかなり戦線縮小。一応、それなり
に動作するレベルまで撤退してテストしていますが、なんとなく速度アップは
している模様。
ただ、バグの過程で置換表データに変なものが混じったらしく、学習させると
異常終了になります。記譜は１７００件くらい集まっているので、一旦全消去して
しまいました。
64: 310 2017/11/05(日)17:40 ID:BooXEMcV(2/4) AAS
ツリー探査がおかしくなる状態を確認。
けど、カーっとなって即座に終了してしまったので、詳細判明せず。
なんとなく症状は見えたので、しばらく目視デバッグします。
というか、これにより直近に遡りチェックやった記譜の正確さに不安が生じてます。
やけに遡りチェックが簡単に通るなぁと思っていたけど、これが原因かもしれない。
というわけでタイムアウトまで行った記譜を５０件ほど再チェックしなきゃならん。
全部で５４時間くらいかかる予想。今週はまるまるパーになりそうです。
その分、良質な置換表データが補えるんだけど。
65: 310 2017/11/05(日)17:50 ID:BooXEMcV(3/4) AAS
計算間違い。全部で８０時間くらいだorz
66: 535 2017/11/05(日)20:13 ID:BZBdQob/(2/2) AAS
畳み込み駄目でしたorz
くそ〜ディープラーニングからは一時撤退するか…
67: 310 2017/11/05(日)23:36 ID:BooXEMcV(4/4) AAS
ぬがーーーーーーーーーーーー！
バグって、記譜データがすべて上書きされて消えてしまったorz
ツリー利用探索のデバッグ用にput処理にエラートラップ仕掛けた時に
やっちゃいました。
学習済のデータが残っているのだけが救いだ・・・。
ここから記譜作ると、そこそこ精度が良い記譜になるはずなのが救いだ…。
68(1): 535 2017/11/06(月)20:40 ID:opZqsFg1(1/2) AAS
バックアップ取れしｗ
一回コード全飛ばししてるでしょうに。
69(1): 535 2017/11/06(月)21:50 ID:opZqsFg1(2/2) AAS
アルファ碁Zeroの手法まねできないかなぁ
でも論文読んでもわかんねぇだろうなぁ
ていうかGoogleがライブラリとして公開してくんねかなぁｗ（他力本願）
70: 310 2017/11/07(火)15:06 ID:8EOI4Ksy(1) AAS
>>68
おっしゃる通りですorz
評価関数の方は要所要所でコピー残していたのに、記譜はなめてました。
>>69
ライブラリ公開されても、実行できる環境構築の方がハードル高いかなと。
論文はいまだに読んでいませんが、rollout無し（バリューネットに１００％依存）
はうまく機能しています。圧倒的にツリー探索性能がアップしているため、評価関数
の精度の低さを、力技でカバーしている感じですが。
とはいえまだ３０手以前の評価値はでたらめに近い状態なので頻繁に間違えます。
強化学習でここまで治るのにどれくらいの時間がかかるのかは不明。後ろの方の
精度が上がらないと、前の方は間違った学習を繰り返すことになりますので。
後ろの方の評価関数がそこそこまともになったので、読み切り処理や遡りチェックの
時間はかなり早くなりました。タイムアウト１時間設定で時々空白３１マスまで遡れる
ようになってきています。
71: 535 2017/11/09(木)21:31 ID:H3GhZh8x(1) AAS
とりあえず、ディープラーニングは一時中断します。
囲連星の序盤のDBは非常にうまく動いてるので、
終盤もDBを生かせないか検討中です。
それと同時にLV3 vs LV3の棋譜取も再開しました。
データは多いほどいいので。
あと310さんの遡りチェックというワードが気になってます。
例えば囲連星の終盤DB作るときにどこから勝負ありの状態になったか
チェック出来たらどうだろう。とか考えています。
72: 535 2017/11/10(金)23:45 ID:8vC+UsNi(1) AAS
天頂７買ってみました。
９段に５子置きで勝てましたが４子で勝つのは相当厳しそう。
天頂６より「あ〜そこ大きそうだよね」ってところを的確に打ってくるみたいです。
上下前次1-新書関写板覧索設栞歴
あと 930 ﾚｽあります
ｽﾚ情報 赤ﾚｽ抽出 画像ﾚｽ抽出 歴の未読ｽﾚ
ぬこの手 ぬこTOP 0.024s