[過去ﾛｸﾞ] 【統計分析】機械学習・データマイニング27 (1002ﾚｽ)
上下前次1-新
このｽﾚｯﾄﾞは過去ﾛｸﾞ倉庫に格納されています｡
次ｽﾚ検索 歴削→次ｽﾚ 栞削→次ｽﾚ 過去ﾛｸﾞﾒﾆｭｰ
1: (ﾜｯﾁｮｲ efda-2fhw [223.217.162.112]) 2020/01/13(月)14:11 ID:srY+iVUM0(1)調 AAS
機械学習とデータマイニングについて語れ若人
＊機械学習に意識・知能は存在しません。
人の意識に触れたい方はスレ違いです
■前スレ
【統計分析】機械学習・データマイニング26
2chｽﾚ:tech
スレ立ての際は、一行目冒頭に
!extend:on:vvvvvv:1000:512
をお願いします。 VIPQ2_EXTDAT: default:vvvvvv:1000:512:: EXT was configured
2: 蟻人間◆T6xkBnTXz7B0 (ｽﾌｯ Sd43-fZVk [49.104.6.165]) 2020/01/13(月)15:57 ID:9nwjRJNrd(1)調 AAS
重複スレッドです。どちらを本スレにするか決めて下さい。
【統計分析】機械学習・データマイニング27
2chｽﾚ:tech
3: 蟻人間◆T6xkBnTXz7B0 (ﾜｯﾁｮｲ 6501-fZVk [126.27.222.196]) 2020/01/13(月)20:12 ID:xgMgrp400(1)調 AAS
という訳で、このスレッドを本スレとします。ご自由にお使い下さい。
4(2): (ﾜｯﾁｮｲ 052f-G18V [180.24.80.238]) 2020/01/13(月)22:23 ID:V22NtS8V0(1)調 AAS
A群 年数とαが正比例
B群 年数と関係なくαは一定
C群 年数とαは反比例
ABCそれぞれを単回帰分析して回帰直線の傾きから、各群の違いを考察しようと思いました。
ACは決定係数0.8といい値なのですが、B群は決定係数がほぼ０となります。
回帰直線は当てはまっているように思うのですが、回帰分析で傾き０だと決定係数も０になるのでしょうか？
5(1): (ﾜｯﾁｮｲ 052f-G18V [180.24.80.238]) 2020/01/14(火)00:01 ID:aLTEXrUV0(1)調 AAS
>>4
自己解決かな。
R2はモデルの当てはまりの良さではなくて、説明変数でどれだけ説明できているかを評価しているから傾き０ならR２も０になる
モデルの当てはまりなら
square mean error
などの評価指標を使うべき
間違ってたらご指摘お願いします。
6(1): (ﾜｯﾁｮｲ fddd-fF6T [122.249.73.11]) 2020/01/14(火)10:29 ID:jw1m7ykR0(1)調 AAS
transformerとcnnて同じもの？
7(1): (ｵｯﾍﾟｹ Srf1-Kh7R [126.161.52.8]) 2020/01/14(火)13:25 ID:NngjCG95r(1)調 AAS
大量の画像の全ての物体を全て自分の手でアノテーションするのは面倒だ
アノテーションアプリと物体検出プログラムで相互にデータをやり取りする
具体的には、それまでアノテーションして作ったpickleデータを元に新たな画像で物体検出して、
その検出領域をpascal voc型などで、しかもアノテーションアプリが出力するものと同じ形で出力し
それをアノテーションアプリが読み取って仮の物体検出領域を画像内に編集可能な状態で
描画する
VOTT3 とか出来たら、この機能が欲しいかなw
でもyoloやcenternetなどの側にも、まあ難しくはないけど領域データ出力部は作らないと
多分並レベルのプログラマなら半年専念したら出来るだろうけどやる奴はちょっといないか
8: (ﾜｯﾁｮｲ 1501-GYCx [60.86.178.93]) 2020/01/14(火)20:48 ID:1xiQQLQx0(1/3)調 AAS
>>6
違うものなので
Transformer-CNNなんてのやってるやつもいる。
9: (ﾜｯﾁｮｲ 1501-GYCx [60.86.178.93]) 2020/01/14(火)20:54 ID:1xiQQLQx0(2/3)調 AAS
>>4-5
R2（決定係数）は
くっそ複雑な式をたてて殴るとなんでかよろしくなってきてしまう、というハッキングが可能なので、
複雑なモデルをたてた場合は、自由度修正済み決定係数（adjusted coefficient of determination）を使おう。
＞square mean error
いわゆるRMSE（平均平方二乗誤差）のことかMSE（平均二乗誤差）のことかわからんのだが、
前者は標準偏差的なサムシング、後者は分散くさいサムシング。
前者はおもたーい外れ値があると、ハッキングされてしまう。
10: (ﾜｯﾁｮｲ 1501-GYCx [60.86.178.93]) 2020/01/14(火)20:56 ID:1xiQQLQx0(3/3)調 AAS
>>7
VIPPERとかJ民を
うまいこと無料の作業員として使えるネタスレ（釣りスレ）立ててやらせればぁー？ ＞ アノテーション
以前どっかのサーバのパスワードを↑の原理で割ったやつがいたはず。
11(2): (ｱｳｱｳｶｰ Sa61-xSig [182.251.141.32]) 2020/01/14(火)21:49 ID:VLxG/qPMa(1)調 AAS
無料の作業員として人を使うのはgoogleとかが既にやってる
読みにくい字を読ませたり画像内のオブジェクトを探させたり
12: (ﾜｯﾁｮｲ fbda-aFxy [223.217.162.112]) 2020/01/15(水)00:11 ID:EHDdhj7F0(1)調 AAS
https://ainow.ai/2020/01/14/182639/
最適化じゃなくて重ね合わせたらいいのに…
13: (ｵｯﾍﾟｹ Sr19-VmTV [126.161.52.8]) 2020/01/15(水)08:02 ID:DfHwFdpbr(1)調 AAS
>>11
クラウドワークスとかで出てるような奴かな
14: (ｱｳｱｳｳｰ Sa21-K7NQ [106.180.14.144]) 2020/01/15(水)17:09 ID:YPapDUBga(1/2)調 AAS
>>11
reCAPCHAとかいうやつだっけ？
15: (ｱｳｱｳｳｰ Sa21-K7NQ [106.180.14.144]) 2020/01/15(水)17:10 ID:YPapDUBga(2/2)調 AAS
スペルが違った
reCAPTCHA
16(1): (ｽﾌｯ Sd03-IoeC [49.106.204.182]) 2020/01/19(日)10:47 ID:myDdOTl3d(1)調 AAS
2020年、Deep Learningをはじめましょう！
https://www.youtube.com/watch?v=9gXB7MvyKJ8&feature=share
もうこのツールで良いんじゃないか？
17: (ﾜｯﾁｮｲ e39c-M7HF [61.125.210.218]) 2020/01/21(火)03:01 ID:CAkK2Pk90(1)調 AAS
>>16
そんなWebベースのツールなんて誰も使わないと思う
ユーザーのこと何もわかってなさそう
18(1): (ﾜｯﾁｮｲ eda5-ZA0I [222.0.172.133]) 2020/01/21(火)04:01 ID:HbPqWHbL0(1)調 AAS
google colabでGPUに切り替えても大して早く動いた感がないんですが何か設定とか
必要なんでしょうか。とりあえずimportはnumpyだけの物とtensorflow2系を利用した
物の二種類のソースコードを用意、それでランタイムを切り替えたんですが
まずnumpyだけで作った奴の実行時間は
CPU:1099秒、GPU:943秒、TPU:1090秒
tensorflow2を使用した物は
CPU:95.1秒、 GPU:86.8秒、TPU:97.8秒
数回やったんですが結果はだいたいこんな感じでした。
一応デフォの2.1から2.0に変えたりしたのですが大した変化は起こらず、
device_lib.list_local_devices() でGPUを認識していることは確認済み
print(tf.config.experimental.list_physical_devices("GPU"))やら
print(x.tensorflow.python.client.device.endswith('GPU:0')) (xは適当なテンソル)
を試したらこちらもGPUは認識しているっぽいです、ただTPUの時はCPUしか
表示されなかったのでもしかしたら上手くいってないかもしれません。
やってることは中間100層の3層mnistでエポック数は20です、予想だとCPUとGPUで
2倍くらい実行時間が違うと踏んでいたので多分何か失敗していると思うのですが…。
19: (ﾜｯﾁｮｲ cd54-yrkk [180.235.0.74]) 2020/01/21(火)05:08 ID:CeoYFJWc0(1)調 AAS
モヤモヤする
20: (ﾜｯﾁｮｲ 2390-FkkX [59.84.74.5]) 2020/01/25(土)09:51 ID:vCW2boQ60(1)調 AAS
https://jp.techcrunch.com/2020/01/24/2020-01-23-googles-dataset-search-comes-out-of-beta/
21: (ﾜｯﾁｮｲ c552-/KBK [118.243.199.173]) 2020/01/25(土)10:04 ID:gws7pYPA0(1/2)調 AAS
aiの民主化
日本は遅れてるなー
せいぜい翻訳バンクくらい。。。
誰でも使える訳じゃないしな
22: (ﾜｯﾁｮｲ f501-FkkX [126.242.217.97]) 2020/01/25(土)11:07 ID:cxLY0DeL0(1)調 AAS
日本の法律にはフェアユースの概念が無いので、日本人が関わった時点で、ライセンス問題が自動的に付随する。
ICUプロジェクトは日本人を排除することでライセンスをクリーンに保っている。。
23: (ﾜｯﾁｮｲ c552-/KBK [118.243.199.173]) 2020/01/25(土)11:17 ID:gws7pYPA0(2/2)調 AAS
閉鎖的
24(1): (ﾜｯﾁｮｲ f501-ajuj [126.66.165.217]) 2020/01/25(土)17:27 ID:jLXMv9zL0(1)調 AAS
tidymodels の時代はやってくるのか？
25(1): (ﾜｯﾁｮｲ f501-FkkX [126.25.131.86]) 2020/01/26(日)13:11 ID:BKKks8j/0(1)調 AAS
>>18
微妙なところ。
使ってるモデル、データの規模も小さいからGPUもTPUも大して生かせないってのはありそう。
データをimagenet、モデルをresnet50くらいにして実験した方が効果はわかりやすいと思う。
26: (ﾜｯﾁｮｲ 25da-Y2bj [60.47.95.202]) 2020/01/26(日)15:02 ID:iSSRn4si0(1)調 AAS
>>24
使ってないなあ。レシピとかジュースとか逆にイメージし辛いんだよ
27: (ﾜｯﾁｮｲ f501-ajuj [126.66.165.217]) 2020/01/26(日)17:09 ID:rnJ+wwZr0(1)調 AAS
Juiceとbakeは名前を変えた方がいいよな
28: (ﾜｯﾁｮｲ f501-FkkX [126.242.217.97]) 2020/01/26(日)17:20 ID:Yuet6lAk0(1)調 AAS
Pythonが900秒使ってたとしたら、倍速くなってるのでは。
29: (ﾜｯﾁｮｲ 9bbb-FkkX [103.2.249.212]) 2020/01/28(火)02:58 ID:AHUMZ1ov0(1)調 AAS
QiitaでCourseraのMLの内容丸パクリして日本語化した記事を
中学生が投稿してて笑った
出典も明確にせず図の使い方や解説までほぼ全パク
コメントでやんわり指摘してる人が一人いたけど無視
それでトレンド乗るくらいいいねされてて草
しかし中学生は黒歴史としても、いいねしてる大人側も大人側だろ
中学生とは言わずとも高校数学レベルで理解できるんだからやりゃいいのにな
やってたらあの完全丸パクリ記事にいいねはできないわ
CourseraのML終えたらG検定の7割くらいを終えたような物だから
あとテキスト買ってCNNやRNNみたいなのを覚えればG検定も楽勝だろうし
上流になってても知ってるべきことだからやって損はない
30: (ﾜｯﾁｮｲ 9554-/KBK [180.235.0.74]) 2020/01/28(火)04:18 ID:C8Byh5hm0(1)調 AAS
きいたは99％がごみ
31: (ﾜｯﾁｮｲ f501-ajuj [126.66.165.217]) 2020/01/28(火)07:36 ID:jb5BRPLw0(1)調 AAS
記事のレベルが正規分布を満たすとしたら、
皆さんのレベルでは99%がゴミでしょう。
32: (ｱｳｱｳｳｰ Sa29-zXgt [106.154.136.64]) 2020/01/28(火)07:46 ID:JI6Ga278a(1)調 AAS
再帰と循環参照の記事はゴミだった
キータでやる内容じゃ無いな
33: (ﾜｯﾁｮｲ a5ad-FkkX [124.144.197.178]) 2020/01/28(火)13:27 ID:RbU9nI6E0(1)調 AAS
きいたをみてPythonと機械学習の勉強してますけど
なんか中途半端な記事ばかりのように思うのですが、
無料だからしょうがないんでしょうね。
きいたは本当に断片しかないんですよね。
有料のところを受講しないとダメですかね？
34: (ｱｳｳｨﾌ FF29-FkkX [106.171.75.238]) 2020/01/28(火)13:33 ID:ijxMtirOF(1)調 AAS
そうでもない
35: (ﾜﾝﾄﾝｷﾝ MMb9-/KBK [210.132.39.19]) 2020/01/28(火)15:08 ID:4HuXe2R7M(1)調 AAS
そうです
36: (ﾌﾞｰｲﾓ MM43-gX8h [49.239.70.64]) 2020/01/28(火)15:10 ID:hS3FcbytM(1)調 AAS
本でええやん
37: (ﾜｯﾁｮｲ 2390-FkkX [59.84.74.5]) 2020/01/28(火)15:37 ID:f5VZ0BtE0(1/2)調 AAS
>トレンド乗るくらいいいねされてて草
qiitaはいいねクラスタみたいのがあるらしい
はてな民が悪習もちこんでる
38: (ﾜｯﾁｮｲ 2390-FkkX [59.84.74.5]) 2020/01/28(火)15:38 ID:f5VZ0BtE0(2/2)調 AAS
プログラムの情報って本来、紙とは相性悪いよなぁ
39: (ﾜｯﾁｮｲ 239c-Q3XR [61.125.210.218]) 2020/01/28(火)16:16 ID:TJfGGUWo0(1)調 AAS
パクリ記事見たけどこれはこれであり
日本語でこういうまともな記事がほぼ存在しないことが問題
やる場所を間違えた感
40: (ｱｳｱｳｶｰ Sa31-MaA/ [182.251.146.128]) 2020/01/28(火)20:03 ID:txqRv4d7a(1)調 AAS
分かりやすい簡単な英語での優れた入門講座が全世界に無料公開されているのに
わざわざ専門家でもない素人が翻訳した、誤りが含まれる可能性があるものを参照する必要がどこにもない
41(1): (ﾌﾞｰｲﾓ MM6b-gX8h [163.49.200.168]) 2020/01/28(火)20:30 ID:xsJhNcNEM(1)調 AAS
コーセラのoctaveムズいし、あれだけだと足りない
42: (ﾜｯﾁｮｲ c161-i/iU [114.150.49.230]) 2020/01/29(水)21:29 ID:MPgI5HCM0(1)調 AAS
挫折しました(笑)
43: (ﾜｯﾁｮｲ c1da-unxX [114.184.58.168]) 2020/01/30(木)10:34 ID:iEbzYH960(1)調 AAS
屈折しましたｗ
44: (ｵｯﾍﾟｹ Src5-bpTA [126.161.52.8]) 2020/01/30(木)12:48 ID:+s+UmAusr(1)調 AAS
入力の次元数が違いますのエラーの嵐
Conv2Dで作り替えて解決すべきか
上下前次1-新書関写板覧索設栞歴
あと 958 ﾚｽあります
ｽﾚ情報 赤ﾚｽ抽出 画像ﾚｽ抽出 歴の未読ｽﾚ AAｻﾑﾈｲﾙ
ぬこの手 ぬこTOP 0.023s