[過去ﾛｸﾞ]
【統計分析】機械学習・データマイニング31 (1002ﾚｽ)
【統計分析】機械学習・データマイニング31 http://mevius.5ch.net/test/read.cgi/tech/1632587566/
上
下
前
次
1-
新
通常表示
512ﾊﾞｲﾄ分割
ﾚｽ栞
このｽﾚｯﾄﾞは過去ﾛｸﾞ倉庫に格納されています｡
次ｽﾚ検索
歴削→次ｽﾚ
栞削→次ｽﾚ
過去ﾛｸﾞﾒﾆｭｰ
513: デフォルトの名無しさん (ﾜｯﾁｮｲ 8d7c-PvPk [122.218.227.106]) [sage] 2022/05/07(土) 07:52:28.76 ID:u2uFhB8a0 たとえば文字枠のある用紙に書かれた手書き文字を OCR する場合 ・手書き文字だから枠からはみ出すし、はみ出す位置もさまざまだし、 ・文字枠も1桁ごとだったり3桁ごとだったり点線だったりキリがない こういうのは対象画像をそのまま（枠付きで）DLに学習させても、読めますよなんてとても言えんと思うんだが。最近はそうでもないのか？ 昔は専門家がデータ眺めてうんうん唸ってロジックを考えていたが、そういうのも大切だよねと http://mevius.5ch.net/test/read.cgi/tech/1632587566/513
514: デフォルトの名無しさん (ﾜｯﾁｮｲ 8d7c-PvPk [122.218.227.106]) [sage] 2022/05/07(土) 08:12:58.95 ID:u2uFhB8a0 あと、学習データで評価してお客に報告するアホ技術者？もシリウスβあたりに左遷して欲しい スキャンしなおしたら同じ紙でも別データだよね、とかいうやつも 正読率80%はぎりぎり最低ラインで、どんな方法を使ってもこの程度はいきます 95%を超えるあたりからが勝負です。頑張りましょうね。と言いたい http://mevius.5ch.net/test/read.cgi/tech/1632587566/514
515: デフォルトの名無しさん (ﾜｯﾁｮｲ 9d6e-xesJ [138.64.67.32]) [sage] 2022/05/07(土) 12:37:56.46 ID:Gp5QHcLl0 simclrはしんくらーで良いの？ http://mevius.5ch.net/test/read.cgi/tech/1632587566/515
516: デフォルトの名無しさん (ﾜｯﾁｮｲ 6204-cfd4 [131.213.243.150]) [] 2022/05/07(土) 13:07:42.38 ID:TDwBHkCb0 >>512-514 基本的に事前に確認しておく内容かと 後から言われても対処できんよ http://mevius.5ch.net/test/read.cgi/tech/1632587566/516
517: デフォルトの名無しさん (ﾜｯﾁｮｲ 8d7c-TPhO [122.218.227.106]) [sage] 2022/05/07(土) 13:59:18.26 ID:u2uFhB8a0 >>516 誰が何を確認するの？ 学習データとして妥当なのかそれ、という話なんだが http://mevius.5ch.net/test/read.cgi/tech/1632587566/517
518: デフォルトの名無しさん (ﾜｯﾁｮｲ 6204-cfd4 [131.213.243.150]) [] 2022/05/07(土) 14:17:45.58 ID:TDwBHkCb0 学習データの妥当性や追加のデータが必要かどうかも普通は打ち合わせしとくよね？ 最終的なアウトプットを出す為に必要なデータもエンジニアから提案あるよね？ http://mevius.5ch.net/test/read.cgi/tech/1632587566/518
519: デフォルトの名無しさん (ﾜｯﾁｮｲ 0202-zDU0 [59.138.123.33]) [sage] 2022/05/07(土) 14:31:19.87 ID:9e79BjZl0 学習データが1000万件ぐらいあれば話が変わってくるけど 現実にあるのはせいぜい1万件、ひどいと100件ぐらいで 何とかしてくれと言ってくる http://mevius.5ch.net/test/read.cgi/tech/1632587566/519
520: デフォルトの名無しさん (ﾜｯﾁｮｲ 6204-cfd4 [131.213.243.150]) [] 2022/05/07(土) 14:35:10.26 ID:TDwBHkCb0 無茶なこと言ってくる人多いからね 最初にはっきりさせておかないと後々面倒になるんだよ 今は周りも大分理解が進んできてるけどさ http://mevius.5ch.net/test/read.cgi/tech/1632587566/520
521: デフォルトの名無しさん (ｱｳｱｳｳｰ Sac5-e+q+ [106.154.64.98]) [sage] 2022/05/07(土) 14:51:30.69 ID:cvuJwPv2a 「100件でやれ」といわれて「それじゃ少なすぎてできない」というのは簡単だけど 本当にできないとは限らないからな そこが難しいところなんだよ 「やる気になれない」とか「俺には無理」ってだけ http://mevius.5ch.net/test/read.cgi/tech/1632587566/521
522: デフォルトの名無しさん (ﾜｯﾁｮｲ 8d7c-PvPk [122.218.227.106]) [sage] 2022/05/07(土) 15:00:50.77 ID:u2uFhB8a0 >>518 学習データの妥当性って基本的にベンダー側が確認するもんだよね？ お客さん的には、領収書と請求書が見分けられる提案が貰えれば、他はどうでもいい。 ベンダー側の危機感知能力に依存するんじゃないだろうか。 しくじると悲惨。しかも試験運用では完璧だったりする。 http://mevius.5ch.net/test/read.cgi/tech/1632587566/522
523: デフォルトの名無しさん (ﾜｯﾁｮｲ 6204-cfd4 [131.213.243.150]) [] 2022/05/07(土) 15:02:08.44 ID:TDwBHkCb0 自分の研究開発テーマだったら取り組む 他部門からの依頼だと確証が持てないから断るかな http://mevius.5ch.net/test/read.cgi/tech/1632587566/523
524: デフォルトの名無しさん (JP 0Hca-dy93 [103.163.220.76]) [sage] 2022/05/09(月) 20:40:18.05 ID:nBUQfFjcH 初心者の質問ですみません 学習中にバッチサイズを変更すると、lossとaccuracyが変わってしまうんですが、 バッチサイズによって収束値が変わるってことでしょうか？ それだとバッチサイズの設定が結果の精度に影響しませんか？ http://mevius.5ch.net/test/read.cgi/tech/1632587566/524
525: デフォルトの名無しさん (ﾜｯﾁｮｲ ee10-UDwQ [153.243.43.6]) [] 2022/05/10(火) 08:13:30.90 ID:/XkHfgKF0 >>524 影響するよー。だからハイパーパラメータの調整はバッチサイズも含むんだよー。ミニバッチが内部的に何やってるかはググってね。でも、ざっくり、学習パラメータ最適化時のサンプリングサイズだと思えばいいよー http://mevius.5ch.net/test/read.cgi/tech/1632587566/525
526: デフォルトの名無しさん (JP 0Hca-tbBW [103.163.220.100]) [sage] 2022/05/10(火) 08:51:59.10 ID:NCnPeIRkH >>525 ありがとうございます やっぱり影響するんですね そうなると、モデルの作り方、パラメータの設定方法、必ず正しいというやり方がないので、 初心者にはハードルが高いですね もうある程度適当にエイヤーでやってみるしかないですね http://mevius.5ch.net/test/read.cgi/tech/1632587566/526
527: デフォルトの名無しさん (ﾜｯﾁｮｲ ee10-cfd4 [153.243.43.6]) [] 2022/05/10(火) 08:59:18.09 ID:/XkHfgKF0 >>526 正しいやり方はないけど、単純なアルゴリズムでベースラインモデル作って評価基準を作り、独自のモデルがそれと比較して優位かを確認しながら進めるという、方法論のテンプレはあるよー。 今ならAutoMLを使うのもいいねー。対応しているタスクならだけどねー http://mevius.5ch.net/test/read.cgi/tech/1632587566/527
528: デフォルトの名無しさん (JP 0Hca-wvgW [103.163.220.95]) [sage] 2022/05/10(火) 09:43:02.83 ID:Kl+PeJSAH >>527 AutoML、初めて知りました 無知でもできそうですねｗ 試しに入れてみました いろいろ勉強できそうです 教えてくださりありがとうございました http://mevius.5ch.net/test/read.cgi/tech/1632587566/528
529: デフォルトの名無しさん (JP 0Hca-IBC7 [103.163.220.59]) [sage] 2022/05/10(火) 11:29:37.64 ID:a3woWy82H tpot自動すぎて怖いｗｗｗ エポック数すら指定しないし 追加学習したほうがよさそうなのにこれ以上は過学習になるんだろうか http://mevius.5ch.net/test/read.cgi/tech/1632587566/529
530: デフォルトの名無しさん (ﾜｯﾁｮｲ 5102-U1YL [118.154.96.7]) [sage] 2022/05/10(火) 13:14:08.17 ID:zWCxNbfy0 バッチはサイズだけでなくサンプルのまとめ方が重要になる場合も たとえば数字の文字認識をする場合は１つのバッチに0-9のサンプルがバランスよく 含まれるようにした方が学習がうまく行く 逆に、0だけ、1だけとかでバッチを作ってしまうとなかなか収束しなくなる http://mevius.5ch.net/test/read.cgi/tech/1632587566/530
531: デフォルトの名無しさん (ﾜｯﾁｮｲ 9d6e-xesJ [138.64.67.32]) [sage] 2022/05/10(火) 13:20:34.71 ID:OS09Ye+10 前にtpot使ったけどボロボロだったぞ http://mevius.5ch.net/test/read.cgi/tech/1632587566/531
532: デフォルトの名無しさん (JP 0Hca-4Pmz [103.163.220.96]) [sage] 2022/05/10(火) 14:00:41.96 ID:J0ydLFpDH >>531 正直あんまり収束してない感じなので追加学習させたいのですが、やり方がわかりませんｗ http://mevius.5ch.net/test/read.cgi/tech/1632587566/532
533: デフォルトの名無しさん (ﾜｯﾁｮｲ 7d5f-oYRD [106.73.226.99]) [sage] 2022/05/10(火) 18:02:27.33 ID:A/IfvceU0 >>530 確かにそういうこと起こりそうだけど、なんか指摘してる論文てあったっけ？ http://mevius.5ch.net/test/read.cgi/tech/1632587566/533
534: デフォルトの名無しさん (ﾜｯﾁｮｲ ee10-cfd4 [153.243.43.6]) [] 2022/05/10(火) 18:17:38.04 ID:/XkHfgKF0 >>533 具体的な論文は把握してないけど、時系列予測で考えると直感的な理解が得られ易いと思うよー http://mevius.5ch.net/test/read.cgi/tech/1632587566/534
535: デフォルトの名無しさん (ﾜｯﾁｮｲ 5102-U1YL [118.154.96.7]) [sage] 2022/05/10(火) 18:35:36.21 ID:zWCxNbfy0 >>533 俺も論文とかはわからないが教科書に載ってるレベルの話なような バッチのサンプルでまとめて勾配を計算するので、サンプルのバランスが悪いと ウエイトがあっちに行ったりこっちに行ったりしてしまうが、 バランスが良いとあるべき方向に真っ直ぐ進みやすい、ということかなと直感的には理解している http://mevius.5ch.net/test/read.cgi/tech/1632587566/535
536: デフォルトの名無しさん (ﾜｯﾁｮｲ 8d01-U1YL [122.255.141.199]) [sage] 2022/05/10(火) 18:51:37.71 ID:gcxSlYEt0 ・日立、週休3日で給与維持 生産性向上へ働き方改革 時間から成果へ転換 ・日立、最低勤務時間を撤廃 「週休3日」も可能に ・2022年の新入社員、79.8%がテレワーク オフィスの必要性は？ ・日立、富士通、NEC…「ジョブ型雇用」を大企業が続々導入する理由 ・日立やNECが導入へ 「週休3日」は人材獲得の切り札 ・リクルートグループ、週休｢約3日｣に。4月から年間休日を145日に増加へ ・カルビー／国内社員3900人を対象に副業解禁 http://mevius.5ch.net/test/read.cgi/tech/1632587566/536
537: デフォルトの名無しさん (ｱｰｸｾｰ Sx91-PvPk [126.151.83.114]) [sage] 2022/05/10(火) 19:37:35.64 ID:rAiWhgPwx >>535 確率的最急降下法だから、偏った方向に突き進むのは良くないとか、そういう次元の話だと思っていた http://mevius.5ch.net/test/read.cgi/tech/1632587566/537
538: デフォルトの名無しさん (ﾜｯﾁｮｲ 9d6e-xesJ [138.64.67.32]) [sage] 2022/05/10(火) 19:43:41.75 ID:OS09Ye+10 そういうことかと http://mevius.5ch.net/test/read.cgi/tech/1632587566/538
539: デフォルトの名無しさん (ﾜｯﾁｮｲ 5102-U1YL [118.154.96.7]) [sage] 2022/05/11(水) 02:35:50.86 ID:n/T4USjf0 確率的勾配降下法と最急降下法が混じってないか？ 最急降下法 : 全サンプルで一度に勾配を求めてウエイトを更新 確率的勾配降下法：１サンプル毎に勾配を求めてウエイトを更新 ミニバッチ勾配降下法：ミニバッチ毎に勾配を求めてウエイトを更新 んで >>524- あたりから話してるのはミニバッチ勾配降下法についてね http://mevius.5ch.net/test/read.cgi/tech/1632587566/539
540: デフォルトの名無しさん (ﾜｯﾁｮｲ 8d7c-maJN [122.218.227.106]) [sage] 2022/05/11(水) 03:49:48.40 ID:2hlm/96F0 ごめん訂正ありがと http://mevius.5ch.net/test/read.cgi/tech/1632587566/540
541: デフォルトの名無しさん (ﾜｯﾁｮｲ 9d6e-xesJ [138.64.67.32]) [sage] 2022/05/11(水) 06:58:42.56 ID:168GVk5R0 ミニバッチも偏ってたら駄目じゃない？ http://mevius.5ch.net/test/read.cgi/tech/1632587566/541
542: デフォルトの名無しさん (ﾜｯﾁｮｲ 8d7c-maJN [122.218.227.106]) [sage] 2022/05/11(水) 09:33:13.11 ID:2hlm/96F0 駄目だよね 偏ったサンプルの気持ちいい場所に捕まってしまう http://mevius.5ch.net/test/read.cgi/tech/1632587566/542
ﾒﾓ帳
(0/65535文字)
上
下
前
次
1-
新
書
関
写
板
覧
索
設
栞
歴
あと 460 ﾚｽあります
ｽﾚ情報
赤ﾚｽ抽出
画像ﾚｽ抽出
歴の未読ｽﾚ
Google検索
Wikipedia
ぬこの手
ぬこTOP
0.010s