[過去ログ]
【統計分析】機械学習・データマイニング24 (1002レス)
【統計分析】機械学習・データマイニング24 http://mevius.5ch.net/test/read.cgi/tech/1556674785/
上
下
前
次
1-
新
通常表示
512バイト分割
レス栞
このスレッドは過去ログ倉庫に格納されています。
次スレ検索
歴削→次スレ
栞削→次スレ
過去ログメニュー
375: デフォルトの名無しさん (ササクッテロ Spef-MdQY [126.33.78.134]) [sage] 2019/05/20(月) 02:38:47.72 ID:zK6cmhQap >>367 正常、異常のラベルはあるの? 人が見たら確実に異常と分かるようなものなのかどうかは一応の判断基準かな 人が判断できるなら特徴量の選び方を工夫する、モデルを工夫すれば何とかなる場合もある 人が判断できないなら単なるパワハラ http://mevius.5ch.net/test/read.cgi/tech/1556674785/375
376: デフォルトの名無しさん (ワッチョイ 9bb0-ZQbr [114.164.61.37]) [sage] 2019/05/20(月) 03:04:00.68 ID:kMasXacY0 >>367です >>371 >>375 ラベルに関しては正常が1万、異常が20あります 人が見ても一応異常と判断することはできます ただ、欠けやキズではなく位置ズレなので軽微なやつは分かりにくいです 分布が正常の方が広くなっていて、異常は小さく、正常の中に被っていて閾値が引けないので あまり水増しで画像を加工しないようにするのと対照の所を判断しやすいように画像のトリミングを行ってフォーカスさせて変化を見てみるくらいかなぁと思ってます… アドバイス頂いた特徴量の選び方を工夫するとはどなような方法がありますか? http://mevius.5ch.net/test/read.cgi/tech/1556674785/376
377: デフォルトの名無しさん (ササクッテロ Spef-MdQY [126.33.78.134]) [sage] 2019/05/20(月) 03:28:18.57 ID:zK6cmhQap あぁ、実例があるって書いてあった 同業他社がすでにやっているなら原理的には可能かも知れないね ただ世の中にはプロの囲碁棋士に勝てるAIがあるんだからお前も作れよ言われても厳しいね あとはまぁオートエンコーダを使ってる理由によるかな ラベルがないからと言う理由なら仕方ないが、入力が画像ならCNNをネットワークに組み込んだ方が性能が出るし、ラベルがあって特徴量が少ないならXGBoostを試すのもあり http://mevius.5ch.net/test/read.cgi/tech/1556674785/377
378: デフォルトの名無しさん (ササクッテロ Spef-MdQY [126.33.78.134]) [sage] 2019/05/20(月) 03:59:25.00 ID:zK6cmhQap >>376 画像から何らかの基準値が作られてそれが識別として利用できないなら基準値を変えることから始める 位置ズレを検出したい、かつ人間なら判断できると言うのであれば、結構な確率でそのようなネットワークは作れると思う もし位置が重要であるならば、前処理として画像を2値化して白黒にしてしまうのがいい 正常と異常のバランスが悪いので、正常なデータだけを使ってVAEを組むのが良いが、オートエンコーダは検出能力が低いので、正常だけども異常と判断されるように閾値を下げる 異常と検出されたものの中から正常なものを除去するために、異常なデータを水増しして、CNNを組み込んだデータで2値分類をする こんな感じかな? http://mevius.5ch.net/test/read.cgi/tech/1556674785/378
379: デフォルトの名無しさん (ワンミングク MMbf-Vdu8 [153.155.221.223]) [] 2019/05/20(月) 09:11:41.12 ID:TIcVJda3M 異常値少なくね? http://mevius.5ch.net/test/read.cgi/tech/1556674785/379
380: デフォルトの名無しさん (ササクッテロ Sp5f-ZQbr [126.35.80.160]) [sage] 2019/05/20(月) 10:19:01.08 ID:ZsUjaMDlp >>378 ありがとうございます こちらから情報が出せないなか丁寧にありがとうございます 2値は試してみたのですが、元々の画像自体がそれほど鮮明ではなく 影などノイズも多く写り込んでいて2値化すると検出対象が特徴として捉えられませんでした… 正しい名称か分かりませんが、Convolutional AutoEncoderを使っています ラベルに関しては元々正常しかありませんでしたが、評価用に正常をトリミングなどで加工して異常としたので元々は正常しかありません あまり現実離れした異常を作ることは意味がありませんが試してみて変化するかとりあえず見てみます… http://mevius.5ch.net/test/read.cgi/tech/1556674785/380
381: デフォルトの名無しさん (ワッチョイ cf85-DcB2 [115.37.189.126]) [sage] 2019/05/20(月) 12:24:30.54 ID:MXQauqoY0 積率を定義するとどんな良いことがあるの? http://mevius.5ch.net/test/read.cgi/tech/1556674785/381
382: デフォルトの名無しさん (ワッチョイ 37da-8NB0 [114.185.8.252]) [sage] 2019/05/20(月) 13:11:13.87 ID:DYuPdND10 just moment! http://mevius.5ch.net/test/read.cgi/tech/1556674785/382
383: デフォルトの名無しさん (ササクッテロ Spef-MdQY [126.33.78.134]) [sage] 2019/05/20(月) 13:29:02.22 ID:zK6cmhQap >>381 積率母関数(Moment Generation Function; MGF)のことでいいかな? 確率変数XのMGFが分かると、E[X^n]が簡単に求まるので係数を除けば E[X] 平均 E[X^2] 分散 E[X^3] 歪度 E[X^4] 尖度 に使える http://mevius.5ch.net/test/read.cgi/tech/1556674785/383
384: デフォルトの名無しさん (アウアウクー MM1f-88Mz [36.11.225.171]) [sage] 2019/05/20(月) 14:44:00.88 ID:wijT7VzXM 大学一年か二年でならう統計学の内容だけど よほど理論的なところに関わってないと、実務で積率母関数を扱うことまずないよね http://mevius.5ch.net/test/read.cgi/tech/1556674785/384
385: デフォルトの名無しさん (ワッチョイ bfda-8NB0 [223.217.47.191]) [sage] 2019/05/20(月) 16:53:24.89 ID:Bx3reKfJ0 全モーメントが分かるとあーら不思議確率分布がわかっちゃうのよ http://mevius.5ch.net/test/read.cgi/tech/1556674785/385
386: デフォルトの名無しさん (ワッチョイ cf85-DcB2 [115.37.189.126]) [sage] 2019/05/20(月) 17:49:16.76 ID:MXQauqoY0 よく分からんけど便利なんだな 分かるようになるまで勉強してみるわ http://mevius.5ch.net/test/read.cgi/tech/1556674785/386
387: デフォルトの名無しさん (ササクッテロ Spef-MdQY [126.33.78.134]) [sage] 2019/05/20(月) 21:53:32.51 ID:zK6cmhQap 確かに積率母関数を実務で使ったことない よくある問題としては、正規分布に従う確率分布がn個(X1, ... , Xn)あり、各々二乗して全てを足したY=X1^2+...+Xn^2はどんな分布に従いますか? 答えは自由度nのカイ二乗分布になるんだけども、畳み込みを使って帰納法で解くのと、MGFを使って解くのどっちが簡単かというと、多分MGFのが簡単 http://mevius.5ch.net/test/read.cgi/tech/1556674785/387
388: デフォルトの名無しさん (アウアウエー Sa5f-EL+e [111.239.59.168]) [sage] 2019/05/20(月) 22:00:11.37 ID:QOzKNsGfa >>380 二値分類問題であれば、まずは SVM を試してみるという方法もあるが http://mevius.5ch.net/test/read.cgi/tech/1556674785/388
389: デフォルトの名無しさん (ワッチョイ af66-tBzz [183.77.216.198]) [] 2019/05/21(火) 07:59:48.51 ID:IiB+jawz0 積率母関数て タイムボカンみたいな響きだな http://mevius.5ch.net/test/read.cgi/tech/1556674785/389
390: デフォルトの名無しさん (ワッチョイ 43ad-A5UN [124.144.197.178]) [] 2019/05/21(火) 08:31:52.29 ID:OkKPzQUl0 戦闘空母群みたいだな―と思ってたw http://mevius.5ch.net/test/read.cgi/tech/1556674785/390
391: デフォルトの名無しさん (ワッチョイ 4f3c-Ma/j [219.98.80.75]) [] 2019/05/21(火) 10:28:03.08 ID:Cd33UaFb0 >>336 憤りを感じるのはもっともだが、東大PhDでも生き残りは難しいのは事実。 5年くらい前までは日本語処理とかで日本人を完全に排除することは難しかったが、 2014年以降は、ローカル固有の処理は排除し、多少、機能は劣っても共通基盤で統一する方向に進んでいる。 例えば現在のGoogle JapanのAI部門のトップは、スザンナ・イリックという強気の女性で、 AI部門の採用に関してはスタンフォード、MIT、ハーバード、バークレイ、カーネギーとかの指定大学制度を採用していて 他の大学の卒業者だと、書類選考で落とされる可能性が大(前にそれ以外は見る価値はないのようなことを言い放って一部で議論を招いた) ただし、Googleのほかの部門に入るのであれば東大、京大、東工大であれば入社はわりかし簡単(むしろ最初は歓迎されると思う)。 あと、営業系だと、給与は他の日本企業と大して変わりはない。 http://mevius.5ch.net/test/read.cgi/tech/1556674785/391
392: デフォルトの名無しさん (アメ MM47-Gp6W [210.142.96.170]) [sage] 2019/05/21(火) 10:30:29.48 ID:6lunsjWmM んで君の学歴は? http://mevius.5ch.net/test/read.cgi/tech/1556674785/392
393: デフォルトの名無しさん (ワッチョイ 4f3c-Ma/j [219.98.80.75]) [] 2019/05/21(火) 10:50:22.36 ID:Cd33UaFb0 あと、一点だけ書くと、AI以外の部門に東大卒で入るのは、やや問題がある。 なぜならば、AIとかの研究開発部門以外の部門に関しては、採用条件で大卒以上という学歴制限がないため 入社してマウンテンビューの本社に派遣されると隣の席の人は高卒ということになったりする。 高卒でGoogleに入るようなやつは大概の場合、プログラミングの天才みたいなやつが多く一般人だと勝てない。 さらに院卒と高卒だと年齢差が6年はあることになり、院卒の年齢だと完全に浮く。 http://mevius.5ch.net/test/read.cgi/tech/1556674785/393
394: デフォルトの名無しさん (ワッチョイ 4f3c-Ma/j [219.98.80.75]) [] 2019/05/21(火) 10:51:52.05 ID:Cd33UaFb0 >>392 コロンビア http://mevius.5ch.net/test/read.cgi/tech/1556674785/394
395: デフォルトの名無しさん (トンモー MM47-A5UN [210.142.95.17]) [] 2019/05/21(火) 11:37:07.08 ID:lQFm1hfyM >>393 Googleやyoutube使ってると マジでクソなプログラムばっかりだ 天才を集めてるというが 誰が判断してるんだ? 人間は自分より知能の低い人間しか 理解できないんじゃないのか? Googleには一部に天才的な人はいる。 それは認める。 しかし大方はクズの馬鹿だ。 六本木にいる奴なんてゴミばっか http://mevius.5ch.net/test/read.cgi/tech/1556674785/395
396: デフォルトの名無しさん (ブーイモ MM6f-/k+J [210.149.255.169]) [sage] 2019/05/21(火) 11:42:34.84 ID:Ba5sgWV5M ゴミと言われてでも1000万ほしいな。 http://mevius.5ch.net/test/read.cgi/tech/1556674785/396
397: デフォルトの名無しさん (ブーイモ MM6f-/k+J [210.149.255.169]) [sage] 2019/05/21(火) 11:43:30.09 ID:Ba5sgWV5M 技術職でGと同じ額出せる企業カマーン http://mevius.5ch.net/test/read.cgi/tech/1556674785/397
398: デフォルトの名無しさん (アウアウウー Sa57-Evxl [106.180.21.138]) [sage] 2019/05/21(火) 12:11:56.45 ID:vH1mZrOla >>395 どこがクソなのか具体的に http://mevius.5ch.net/test/read.cgi/tech/1556674785/398
399: デフォルトの名無しさん (JP 0H1f-VAkf [153.145.95.158]) [sage] 2019/05/21(火) 12:30:14.64 ID:hRizw/teH クレクレ受け身じゃなくサービス立ち上げたるぐらいの気概出しなよ まぁそこが順調にいきゃ苦労しないんだけど http://mevius.5ch.net/test/read.cgi/tech/1556674785/399
400: デフォルトの名無しさん (スププ Sdaf-Nx0B [49.98.67.97]) [] 2019/05/21(火) 12:50:03.53 ID:jJIzGyAxd ネットのニュース記事に、有識者のコメントのように 自動でコメントするAIは実現可能ですか? さすがに難しい? http://mevius.5ch.net/test/read.cgi/tech/1556674785/400
401: デフォルトの名無しさん (アウアウカー Sa5f-FbtK [182.251.118.207]) [sage] 2019/05/21(火) 15:02:21.61 ID:1PvoN0q0a むりぃ http://mevius.5ch.net/test/read.cgi/tech/1556674785/401
402: デフォルトの名無しさん (ワッチョイ 4f2c-rckI [219.162.237.2]) [sage] 2019/05/21(火) 15:12:58.40 ID:ZAINLMmO0 YouTube の表示にバグがあって、報告しても、2週間以上そのまま放置される! HTML, CSS, JavaScript, jQuery などを知らないから、修正できない 検索フィルターの条件に「今日」と入力しても、それ以前の動画も表示されてしまう。 もう直ったけど http://mevius.5ch.net/test/read.cgi/tech/1556674785/402
403: デフォルトの名無しさん (トンモー MM47-A5UN [210.142.95.17]) [] 2019/05/21(火) 15:13:29.27 ID:lQFm1hfyM >>400 おれは言語や翻訳の機械学習も やってるが、 コメントの内容がありふれたものでいいなら そんなに難しくはない。 http://mevius.5ch.net/test/read.cgi/tech/1556674785/403
404: 402 (ワッチョイ 4f2c-rckI [219.162.237.2]) [sage] 2019/05/21(火) 15:17:01.20 ID:ZAINLMmO0 基本的に、5ch とYouTube はテストせずに、本番用を変える。 漏れはYouTube に、何回も報告してる! HTML, CSS, JavaScript, jQuery などが、おかしい 5ch も、IE11 では無限ループか何かで、操作できない! UI がスタックして動かない http://mevius.5ch.net/test/read.cgi/tech/1556674785/404
メモ帳
(0/65535文字)
上
下
前
次
1-
新
書
関
写
板
覧
索
設
栞
歴
あと 598 レスあります
スレ情報
赤レス抽出
画像レス抽出
歴の未読スレ
Google検索
Wikipedia
ぬこの手
ぬこTOP
0.011s