[過去ログ] 【統計分析】機械学習・データマイニング23 (1002レス)
上下前次1-新
抽出解除 レス栞
このスレッドは過去ログ倉庫に格納されています。
次スレ検索 歴削→次スレ 栞削→次スレ 過去ログメニュー
リロード規制です。10分ほどで解除するので、他のブラウザへ避難してください。
330(4): (ササクッテロル Sp37-AfD3 [126.236.205.2]) 2019/03/19(火)18:17 ID:uIS8YiSHp(2/2) AAS
>>322
あらかじめ訓練データ、検証データ、テストデータに分割しておいてテストデータを使うタイミングは各エポックで最もロスが小さかったモデルを保存して、そのモデルの評価する時にしか使ってないのでその点は大丈夫だと思います…(kerasのflow_from_directoryを使いました)
やはりデータが少ないとはいえAUCがほぼ1なのはおかしいと認識するべきでしょうか?
334: (ワッチョイ ef66-kbMb [183.77.216.198]) 2019/03/19(火)20:12 ID:dMzOeXf20(2/2) AAS
>>330
もっと簡単なアルゴリズムの結果と比較白
335: (ワッチョイ 3301-q2d8 [126.109.69.164]) 2019/03/19(火)20:50 ID:aaAbvqyx0(2/2) AAS
>>330
データ数がとにかく小さすぎるのでクロスバリデーションするように
データを作った方が良さげ。
5分割くらいでやっても良さげならもうそれでいいんじゃないかという気がする。
337: (ワッチョイ bf94-D8oG [115.37.81.189]) 2019/03/19(火)21:32 ID:W9RsgnS50(1) AAS
>>330
あとどの文献で読んだか忘れたけど
伸縮移動やGANで水増しした元が同じデータが学習に含まれていると交差検証にならないって議論があったはず
344: (ワッチョイ 43b0-AfD3 [114.164.61.37]) 2019/03/19(火)22:35 ID:U2Cf1GsF0(1) AAS
>>330 です
レス頂いた方ありがとうございます
訓練データと検証データでのaccuracyとlossをプロットするとこんな感じになります
(似たケースの方の画像を拝借しました)
画像リンク
今手元にコードが無いのですが自分の場合50エポック程度回しましたが似たような感じになっていて過学習なのか何なのかよく分からない状態です
交差検証はやっていませんでした…
kerasを使っているのですがドキュメントを見ても交差検証に関して使える関数など見つけられなかったのですがやはりscikit-learnに渡すしかないでしょうか?
上下前次1-新書関写板覧索設栞歴
スレ情報 赤レス抽出 画像レス抽出 歴の未読スレ
ぬこの手 ぬこTOP 0.039s