[過去ログ] 【統計分析】機械学習・データマイニング27 (1002レス)
1-

このスレッドは過去ログ倉庫に格納されています。
次スレ検索 歴削→次スレ 栞削→次スレ 過去ログメニュー
2: 蟻人間◆T6xkBnTXz7B0 (スフッ Sd43-fZVk [49.104.6.165]) [sage] 2020/01/13(月) 15:57:32.45 ID:9nwjRJNrd(1) AAS
重複スレッドです。どちらを本スレにするか決めて下さい。

【統計分析】機械学習・データマイニング27
2chスレ:tech
3: 蟻人間◆T6xkBnTXz7B0 (ワッチョイ 6501-fZVk [126.27.222.196]) [sage] 2020/01/13(月) 20:12:05.67 ID:xgMgrp400(1) AAS
という訳で、このスレッドを本スレとします。ご自由にお使い下さい。
4
(2): デフォルトの名無しさん (ワッチョイ 052f-G18V [180.24.80.238]) [sage] 2020/01/13(月) 22:23:51.29 ID:V22NtS8V0(1) AAS
A群 年数とαが正比例
B群 年数と関係なくαは一定
C群 年数とαは反比例

ABCそれぞれを単回帰分析して回帰直線の傾きから、各群の違いを考察しようと思いました。
ACは決定係数0.8といい値なのですが、B群は決定係数がほぼ0となります。
回帰直線は当てはまっているように思うのですが、回帰分析で傾き0だと決定係数も0になるのでしょうか?
5
(1): デフォルトの名無しさん (ワッチョイ 052f-G18V [180.24.80.238]) [sage] 2020/01/14(火) 00:01:12.56 ID:aLTEXrUV0(1) AAS
>>4
自己解決かな。
R2はモデルの当てはまりの良さではなくて、説明変数でどれだけ説明できているかを評価しているから傾き0ならR2も0になる
モデルの当てはまりなら
square mean error
などの評価指標を使うべき

間違ってたらご指摘お願いします。
6
(1): デフォルトの名無しさん (ワッチョイ fddd-fF6T [122.249.73.11]) [] 2020/01/14(火) 10:29:55.29 ID:jw1m7ykR0(1) AAS
transformerとcnnて同じもの?
7
(1): デフォルトの名無しさん (オッペケ Srf1-Kh7R [126.161.52.8]) [sage] 2020/01/14(火) 13:25:53.31 ID:NngjCG95r(1) AAS
大量の画像の全ての物体を全て自分の手でアノテーションするのは面倒だ

アノテーションアプリと物体検出プログラムで相互にデータをやり取りする
具体的には、それまでアノテーションして作ったpickleデータを元に新たな画像で物体検出して、
その検出領域をpascal voc型などで、しかもアノテーションアプリが出力するものと同じ形で出力し
それをアノテーションアプリが読み取って仮の物体検出領域を画像内に編集可能な状態で
描画する

VOTT3 とか出来たら、この機能が欲しいかなw
でもyoloやcenternetなどの側にも、まあ難しくはないけど領域データ出力部は作らないと

多分並レベルのプログラマなら半年専念したら出来るだろうけどやる奴はちょっといないか
8: デフォルトの名無しさん (ワッチョイ 1501-GYCx [60.86.178.93]) [] 2020/01/14(火) 20:48:25.42 ID:1xiQQLQx0(1/3) AAS
>>6
違うものなので
Transformer-CNNなんてのやってるやつもいる。
9: デフォルトの名無しさん (ワッチョイ 1501-GYCx [60.86.178.93]) [] 2020/01/14(火) 20:54:58.12 ID:1xiQQLQx0(2/3) AAS
>>4-5
R2(決定係数)は
くっそ複雑な式をたてて殴るとなんでかよろしくなってきてしまう、というハッキングが可能なので、
複雑なモデルをたてた場合は、自由度修正済み決定係数(adjusted coefficient of determination)を使おう。

>square mean error
いわゆるRMSE(平均平方二乗誤差)のことかMSE(平均二乗誤差)のことかわからんのだが、
前者は標準偏差的なサムシング、後者は分散くさいサムシング。
前者はおもたーい外れ値があると、ハッキングされてしまう。
10: デフォルトの名無しさん (ワッチョイ 1501-GYCx [60.86.178.93]) [] 2020/01/14(火) 20:56:33.96 ID:1xiQQLQx0(3/3) AAS
>>7
VIPPERとかJ民を
うまいこと無料の作業員として使えるネタスレ(釣りスレ)立ててやらせればぁー? > アノテーション

以前どっかのサーバのパスワードを↑の原理で割ったやつがいたはず。
11
(2): デフォルトの名無しさん (アウアウカー Sa61-xSig [182.251.141.32]) [sage] 2020/01/14(火) 21:49:32.16 ID:VLxG/qPMa(1) AAS
無料の作業員として人を使うのはgoogleとかが既にやってる
読みにくい字を読ませたり画像内のオブジェクトを探させたり
12: デフォルトの名無しさん (ワッチョイ fbda-aFxy [223.217.162.112]) [sage] 2020/01/15(水) 00:11:52.66 ID:EHDdhj7F0(1) AAS
外部リンク:ainow.ai

最適化じゃなくて重ね合わせたらいいのに…
13: デフォルトの名無しさん (オッペケ Sr19-VmTV [126.161.52.8]) [sage] 2020/01/15(水) 08:02:35.42 ID:DfHwFdpbr(1) AAS
>>11
クラウドワークスとかで出てるような奴かな
14: デフォルトの名無しさん (アウアウウー Sa21-K7NQ [106.180.14.144]) [] 2020/01/15(水) 17:09:34.82 ID:YPapDUBga(1/2) AAS
>>11
reCAPCHAとかいうやつだっけ?
15: デフォルトの名無しさん (アウアウウー Sa21-K7NQ [106.180.14.144]) [] 2020/01/15(水) 17:10:54.19 ID:YPapDUBga(2/2) AAS
スペルが違った
reCAPTCHA
16
(1): デフォルトの名無しさん (スフッ Sd03-IoeC [49.106.204.182]) [] 2020/01/19(日) 10:47:24.95 ID:myDdOTl3d(1) AAS
2020年、Deep Learningをはじめましょう!
動画リンク[YouTube]


もうこのツールで良いんじゃないか?
17: デフォルトの名無しさん (ワッチョイ e39c-M7HF [61.125.210.218]) [sage] 2020/01/21(火) 03:01:03.03 ID:CAkK2Pk90(1) AAS
>>16
そんなWebベースのツールなんて誰も使わないと思う
ユーザーのこと何もわかってなさそう
18
(1): デフォルトの名無しさん (ワッチョイ eda5-ZA0I [222.0.172.133]) [] 2020/01/21(火) 04:01:38.07 ID:HbPqWHbL0(1) AAS
google colabでGPUに切り替えても大して早く動いた感がないんですが何か設定とか
必要なんでしょうか。とりあえずimportはnumpyだけの物とtensorflow2系を利用した
物の二種類のソースコードを用意、それでランタイムを切り替えたんですが
まずnumpyだけで作った奴の実行時間は
CPU:1099秒、GPU:943秒、TPU:1090秒
tensorflow2を使用した物は
CPU:95.1秒、 GPU:86.8秒、TPU:97.8秒
数回やったんですが結果はだいたいこんな感じでした。
一応デフォの2.1から2.0に変えたりしたのですが大した変化は起こらず、
device_lib.list_local_devices() でGPUを認識していることは確認済み
print(tf.config.experimental.list_physical_devices("GPU"))やら
print(x.tensorflow.python.client.device.endswith('GPU:0')) (xは適当なテンソル)
を試したらこちらもGPUは認識しているっぽいです、ただTPUの時はCPUしか
表示されなかったのでもしかしたら上手くいってないかもしれません。
やってることは中間100層の3層mnistでエポック数は20です、予想だとCPUとGPUで
2倍くらい実行時間が違うと踏んでいたので多分何か失敗していると思うのですが…。
19: デフォルトの名無しさん (ワッチョイ cd54-yrkk [180.235.0.74]) [] 2020/01/21(火) 05:08:01.44 ID:CeoYFJWc0(1) AAS
モヤモヤする
20: デフォルトの名無しさん (ワッチョイ 2390-FkkX [59.84.74.5]) [sage] 2020/01/25(土) 09:51:49.23 ID:vCW2boQ60(1) AAS
外部リンク:jp.techcrunch.com
21: デフォルトの名無しさん (ワッチョイ c552-/KBK [118.243.199.173]) [] 2020/01/25(土) 10:04:24.49 ID:gws7pYPA0(1/2) AAS
aiの民主化

日本は遅れてるなー
せいぜい翻訳バンクくらい。。。
誰でも使える訳じゃないしな
22: デフォルトの名無しさん (ワッチョイ f501-FkkX [126.242.217.97]) [] 2020/01/25(土) 11:07:06.72 ID:cxLY0DeL0(1) AAS
日本の法律にはフェアユースの概念が無いので、日本人が関わった時点で、ライセンス問題が自動的に付随する。
ICUプロジェクトは日本人を排除することでライセンスをクリーンに保っている。。
23: デフォルトの名無しさん (ワッチョイ c552-/KBK [118.243.199.173]) [] 2020/01/25(土) 11:17:22.21 ID:gws7pYPA0(2/2) AAS
閉鎖的
24
(1): デフォルトの名無しさん (ワッチョイ f501-ajuj [126.66.165.217]) [] 2020/01/25(土) 17:27:05.16 ID:jLXMv9zL0(1) AAS
tidymodels の時代はやってくるのか?
25
(1): デフォルトの名無しさん (ワッチョイ f501-FkkX [126.25.131.86]) [sage] 2020/01/26(日) 13:11:56.12 ID:BKKks8j/0(1) AAS
>>18
微妙なところ。
使ってるモデル、データの規模も小さいからGPUもTPUも大して生かせないってのはありそう。
データをimagenet、モデルをresnet50くらいにして実験した方が効果はわかりやすいと思う。
26: デフォルトの名無しさん (ワッチョイ 25da-Y2bj [60.47.95.202]) [] 2020/01/26(日) 15:02:08.11 ID:iSSRn4si0(1) AAS
>>24
使ってないなあ。レシピとかジュースとか逆にイメージし辛いんだよ
1-
あと 976 レスあります
スレ情報 赤レス抽出 画像レス抽出 歴の未読スレ AAサムネイル

ぬこの手 ぬこTOP 0.015s