[過去ログ]
【オセロ,将棋】ボードゲーム【囲碁,War】 (1002レス)
上
下
前
次
1-
新
このスレッドは過去ログ倉庫に格納されています。
次スレ検索
歴削→次スレ
栞削→次スレ
過去ログメニュー
725
:
310
2017/02/08(水)21:46
ID:GrcF81sn(1/2)
AA×
[240|
320
|
480
|
600
|
原寸
|
GIF
|
べ
|
レス栞
|
レス消
]
725: 310 [sage] 2017/02/08(水) 21:46:39.89 ID:GrcF81sn 昔mnistでオートエンコーダのテストした時のように、学習内容(ウェイト)をBMPにして 可視化してました。テストに時間がかかるので、色々すったもんだバグとりに時間が かかってましたが、ようやくなんとか表示できるようになりました。で、とりあえず想定より 少な目の隠れ層4096個でテスト開始。 勾配ノイズ(焼きなまし)の設定値もでかすぎたので、設定値を自動計算するようにしたり。 NN復活当初うまく動かなかった原因がこれでした。 で、まだ学習途中なのですが、ウェイトデータ見ると192個(=64×3)毎に1ビットづつ ずれるパターンに収れんしていっています。192といえば入力データのサイズで、 横に64個づつ並べたビットマップ画像に、まるで光子の回析実験のような縦じまが(汗 そんな周期性が生まれるはずがないので、どこかにバグがあるんじゃないかと。 表示するプログラムのバグかも知れないけど、1エポックに3時間かかるので、止めて デバッグに入るか、それとも続行するかで悶々中…。 どっちにしても時間がかかるので、裏でDCNNをもう一度コーディング開始。 あまりにネストが深いのでミニバッチは一旦放棄してSGDで。 GoogleのTensorFlowがテンソルな意味が良くわかった。 DCNNだと元データが2次元で、更にチャンネルがある行列では次元が足りないorz 今最大の懸案は、とりあえず隠れ層4096でオートエンコーダの事前 学習しているけど、 それが終わり全体の学習にいって上手く行かなかった時、中間層を増やして再トライ するか、それともDCNNに行ってしまうか。 http://mevius.5ch.net/test/read.cgi/gamedev/1057763418/725
昔でオートエンコーダのテストした時のように学習内容ウェイトをにして 可視化してましたテストに時間がかかるので色すったもんだバグとりに時間が かかってましたがようやくなんとか表示できるようになりましたでとりあえず想定より 少な目の隠れ層4096個でテスト開始 勾配ノイズ焼きなましの設定値もでかすぎたので設定値を自動計算するようにしたり 復活当初うまく動かなかった原因がこれでした でまだ学習途中なのですがウェイトデータ見ると192個643毎に1ビットづつ ずれるパターンに収れんしていっています192といえば入力データのサイズで 横に64個づつ並べたビットマップ画像にまるで光子の回析実験のような縦じまが汗 そんな周期性が生まれるはずがないのでどこかにバグがあるんじゃないかと 表示するプログラムのバグかも知れないけど1エポックに3時間かかるので止めて デバッグに入るかそれとも続行するかで悶中 どっちにしても時間がかかるので裏でをもう一度コーディング開始 あまりにネストが深いのでミニバッチは一旦放棄してで のがテンソルな意味が良くわかった だと元データが2次元で更にチャンネルがある行列では次元が足りない 今最大の懸案はとりあえず隠れ層でオートエンコーダの事前 学習しているけど それが終わり全体の学習にいって上手く行かなかった時中間層を増やして再トライ するかそれともに行ってしまうか
上
下
前
次
1-
新
書
関
写
板
覧
索
設
栞
歴
あと 277 レスあります
スレ情報
赤レス抽出
画像レス抽出
歴の未読スレ
ぬこの手
ぬこTOP
0.044s