[過去ﾛｸﾞ] 【オセロ,将棋】ボードゲーム Part2【囲碁,War】 (1002ﾚｽ)
上下前次1-新
このｽﾚｯﾄﾞは過去ﾛｸﾞ倉庫に格納されています｡
次ｽﾚ検索 歴削→次ｽﾚ 栞削→次ｽﾚ 過去ﾛｸﾞﾒﾆｭｰ
272: 535 2018/03/03(土)01:00 ID:nviHj1ts(2/6) AAS
__hash__と__eq__を定義するといいみたいです。
__eq__はC++のoperator==で良いみたいです。
273: 535 2018/03/03(土)01:33 ID:nviHj1ts(3/6) AAS
まだエラー出ますね。
行ったと思ったのにorz
274: 535 2018/03/03(土)19:12 ID:nviHj1ts(4/6) AAS
お、処理が進み始めました。
Board.init_boardでC++のオブジェクトを初期化してなかったのがエラーの原因だったみたいです。
275: 535 2018/03/03(土)19:51 ID:nviHj1ts(5/6) AAS
やっぱ小路盤五目並べと比べて時間かかりますね。
焦れるw
とりあえず、これでウェイトファイルが出力されれば第一段階クリアですが…
276: 535 2018/03/03(土)20:18 ID:nviHj1ts(6/6) AAS
あ〜これシングルスレッドなんですね。
まあ確かにコード読んでてもマルチスレッドには見えなかったけど。
277: 535 2018/03/06(火)20:34 ID:4NZM8BU2(1/3) AAS
ベストポリシーとか言うファイルは出力されましたが…
いかんせん遅すぎますねぇ
並列化してハードも強化してあと30倍は速くしないと…
278: 535 2018/03/06(火)22:28 ID:4NZM8BU2(2/3) AAS
んんん、もしかして仮想環境だとディスクアクセスめっちゃ重くなる？
CPUがほとんど仕事してないんだが…
279: 535 2018/03/06(火)22:40 ID:4NZM8BU2(3/3) AAS
こりゃネイティブLinux環境構築も考えるか…
280: 535 2018/03/07(水)20:16 ID:Xay4EsKj(1) AAS
ディスクアクセスが１００近くいって処理がほとんど進まなくなっちまったorz
いったん止めるべきかな〜
281(1): 310 2018/03/08(木)00:53 ID:KJS05rsc(1/2) AAS
新評価関数版ようやく一通りできた。
強化学習にすごーく時間がかかりそう（汗
というわけでNew PC見繕ってます。
ノートPCでi7-8700Kの６コア１２スレッドにメモリー３２メガで
GTX1080搭載のノートPCがある。
むむむ。
282: 535 2018/03/08(木)18:17 ID:GeAn+CtF(1) AAS
お高いんでしょう？
283: 535 2018/03/08(木)19:23 ID:MQ3zVdYu(1/4) AAS
帰ってきてパソコン見てみたら学習が強制終了してました。
土曜からずっと動かしっぱなしでしたが、ここにきて強制終了は痛いですね。
解決しようにも再現させるだけで数日かかってしまうし目星を付けることすら難しそう。
284: 535 2018/03/08(木)20:05 ID:MQ3zVdYu(2/4) AAS
途中で出力されたポリシーモデルで対戦してみましたが、
予想してたよりずっとまともな手を返してきますね。
ほぼランダムに着手すると思ってました。
これはちゃんと学習できる環境整えればかなり期待できるかも！
285: 535 2018/03/08(木)20:11 ID:MQ3zVdYu(3/4) AAS
俺も良い目のノート一台買ってLinux入れようかなぁ
デスクトップ２台は手狭だからなぁ
286: 535 2018/03/08(木)21:30 ID:MQ3zVdYu(4/4) AAS
とりあえず、Linuxならパイソン動くことはわかったから
他のもっと高速化に力入れたalpha zeroプロジェクトも試してみようかな
287: 310 2018/03/08(木)23:33 ID:KJS05rsc(2/2) AAS
どもです。
お高いですが、デスクトップのフルスペックの1/3以下で済むようです。
回しっぱなしの奴がレアケースで異常終了すると萎えますね。
自分の奴は、たぶん怪しいところはほぼ蓋をしているので、今は安心しています。
とはいえ、評価値の保存に数秒かかるようになってしまったので、保存中にうっかり
終了してウェイトファイルを破壊しないように、いくつか策を講じました。最近はOSの
アップデートで勝手に再起動されちゃうので。
288: 535 2018/03/09(金)20:26 ID:wTwCUiOb(1) AAS
デスクトップの1/3って性能がですか？
289: 310 2018/03/10(土)19:53 ID:jEGGoWyJ(1/2) AAS
あ、価格と性能です(^^;
強化学習に凡ミス発見。
強化学習が良いのは、学習し続ければ何とか復旧できると思えるところorz
290: 535 2018/03/10(土)20:42 ID:MfccYD4W(1) AAS
価格コムで調べたら>>281って50万以上ですよね？
291(1): 310 2018/03/10(土)23:47 ID:jEGGoWyJ(2/2) AAS
こいつです。
外部ﾘﾝｸ[php]:www.pc-koubou.jp
i9-7080XEのデスクトップだとメモリー頑張ると１００万ですからね…
292: 535 2018/03/11(日)00:26 ID:Rh0MFs+Y(1) AAS
>>291
ほほう？
ハイスペックノートの割には確かに安いですね。
293: 535 2018/03/12(月)23:17 ID:t7pU5NWq(1) AAS
うわパイソン部分でルール間違ってたorz
やっぱ軽くでもテストはやっておかないとあかんなorz
294: 310 2018/03/14(水)21:17 ID:Hsr0gVbu(1) AAS
うぬぬ。強化学習でどこかおかしい。
強化学習単純化しすぎちゃったかなぁ。
暫定的にひたすら記譜作成＆記譜学習に戻しました。
遡り３０手が鬼門。記譜学習で、ここをクリアする事を当面の目標にします。
とはいえ、残り２９手完全読み切りの記譜がそれなりにあるのは、以前では
考えられない状況ではありますが。
295: 310 2018/03/15(木)22:46 ID:CxmBs8oA(1) AAS
強化学習がおかしいというより、記譜のパターンが圧倒的に足りていなかった
のかもと思い始めました。それによって、着手して分岐しても±０となっている
みたいな。
とりあえず、記譜の増殖手段を模索中。
今は、ヌルウィンドウサーチを使用して、遡り探索を行っている関係で、間違った
着手（石損となる手）を捨ててますが、ある程度までその手も読み切って、記譜に
加えても良いのかなぁと思っています。
とりあえず、βカット（もっと良い手があった）時の評価関数は明らかに読み間違い
をしているので、そこ限定で記譜に加えていますが、ある程度以上の手数は全て
付け足しても良いのかなぁと。
296: 310 2018/03/17(土)02:14 ID:Foa7nGV6(1) AAS
なんとなく想像しただけですが、何が悪かったのかわかり始めました。
今の学習は「良い手」しか学習していないという事です。
序盤はある程度ランダムな着手を入れて、結果がばらつくようにしていますが、
途中から読みを入れて、良い手だけで着手し、その結果を遡りで訂正しています。
遡りが有効なのは３０手くらいまでで、序盤のランダムは２０手程度までに抑えて
あります。とすると、遡れる範囲では、悪手を打ったらどういう事になるのかという
学習が抜けている。間違えた着手もちょっとだけ悪いだけでです。結果、最善手の
評価値はそこそこ正確なのですが、極端な悪手も、評価値としてはちょっとだけ
悪い数字でも問題が起きないという事になります。
これはこれで順序付けさえ合っていればそれで良いのですが、ちょっと学習が
進んで、微妙に係数が変わった時に、計算上０．１程度しか悪くない相当な悪手
をうっかり選択しやすくなってしまうという事で、これがオーダリングで悪さをして、
探索時間を長引かせてしまう可能性があります。
恐らく評価関数のステージ分割で、表現力がかなりアップした事から、こういう
学習漏れみたいな事が起きてくるのかなぁと。ほんと、評価関数はスカスカです。
というわけで、昨夜書いたように、ある程度深さを捨てて分岐をすべて記譜に残す
ようにしてみようかなぁと思っています。しばらく記譜作成しながら、この事を踏まえ
た強化学習をちょっと考えてみたいと思っています。
297: 535 2018/03/18(日)22:34 ID:tUeDVO3T(1) AAS
結果が出るまで時間がかかり過ぎるなぁ。
もうちょっと様子見るけど。。。
やっぱマルチスレッド化された別のalpha zeroプロジェクト探そうかな…
298: 535 2018/03/20(火)21:45 ID:/Ra5toxr(1) AAS
駄目だぁ、強くなる気配がないorz
別のalpha zero プロジェクト本気で探すか…
ここまで来てもったいない気もするけど…
299: 535 2018/03/23(金)21:13 ID:Z4T42krD(1/2) AAS
なんかバグ直して再学習したら、ランダムに打ったほうがマシ、くらいに変な手（１の１とか）打つんだが？
もう嫌になっちゃう。
300: 535 2018/03/23(金)21:21 ID:Z4T42krD(2/2) AAS
そういやLeela Zeroも学習過程では一線うってたな。。。
逆にいい傾向なのか？？？
301: 310 2018/03/25(日)02:23 ID:Yig4cMbl(1) AAS
分岐をすべて記譜にリストアップするようにしてから、爆発的に記譜が増えてます。
２０００程度だったのが、１５０００超えました。
が、まだまだスカスカみたいです。
ここまでするんなら、真面目に自己対戦して遡りせずに、ランダム着手に対して
分岐をリストアップさせても一緒というか、早い気がしてきています（汗
上下前次1-新書関写板覧索設栞歴
あと 701 ﾚｽあります
ｽﾚ情報 赤ﾚｽ抽出 画像ﾚｽ抽出 歴の未読ｽﾚ
ぬこの手 ぬこTOP 0.016s