[過去ログ]
【統計分析】機械学習・データマイニング25 (1002レス)
【統計分析】機械学習・データマイニング25 http://mevius.5ch.net/test/read.cgi/tech/1561568018/
上
下
前
次
1-
新
通常表示
512バイト分割
レス栞
このスレッドは過去ログ倉庫に格納されています。
次スレ検索
歴削→次スレ
栞削→次スレ
過去ログメニュー
725: デフォルトの名無しさん (ワッチョイ 2701-bCZX [126.26.34.63]) [sage] 2019/08/24(土) 08:58:04.63 ID:u6taJwr50 明らかに実データ取り扱ってない奴だな。 実際のデータのクソ汚さ見たらc/c++系統で処理するとか地獄だとわかる。 http://mevius.5ch.net/test/read.cgi/tech/1561568018/725
726: デフォルトの名無しさん (ワッチョイ 87b0-P0k6 [122.16.225.100]) [sage] 2019/08/24(土) 09:11:22.91 ID:+PLwcW2w0 前処理はそれに適した言語やツールを使えばいいだけで、それと数値計算自体を 同じものでやらなきゃならん必然性はないがな。昔はみんなそうやってたし。 http://mevius.5ch.net/test/read.cgi/tech/1561568018/726
727: デフォルトの名無しさん (ワッチョイ e7ad-oH2O [124.144.197.178]) [] 2019/08/24(土) 09:28:58.66 ID:RkH4AGAO0 >>725 自分がC、C++できないからって そゆ発言はダメです 言語は状況に応じて適切なのを選択するんですよ わかるかな? Pythonは遅すぎて使えないという 場合はよくありますから http://mevius.5ch.net/test/read.cgi/tech/1561568018/727
728: デフォルトの名無しさん (ワッチョイ bfab-JHzk [39.111.85.105]) [sage] 2019/08/24(土) 10:21:36.60 ID:ioeZFbio0 前処理終わったら一旦ファイルかDBに保存するじゃない? 計算はそいつを読み込むんだから、前処理と主計算で別の言語使っても問題ないでしょ。パイソンでもjuliaでもCでも好きにすればよろしいかと http://mevius.5ch.net/test/read.cgi/tech/1561568018/728
729: デフォルトの名無しさん (アウアウウー Saab-MlRc [106.154.130.61]) [] 2019/08/24(土) 10:25:51.59 ID:W+rnr2YCa >>727 python自体が遅いのは確かだがnumpy, scipyとかのライブラリのバックエンドはCってご存じ? 適切に使えばかなり速い http://mevius.5ch.net/test/read.cgi/tech/1561568018/729
730: デフォルトの名無しさん (アウアウウー Saab-MlRc [106.154.130.61]) [] 2019/08/24(土) 10:28:07.51 ID:W+rnr2YCa >>724 目的に応じてツールを使い分けてるだけじゃん 手書きの履歴書とか持て囃してそう http://mevius.5ch.net/test/read.cgi/tech/1561568018/730
731: デフォルトの名無しさん (JP 0Hbf-rA3M [153.145.204.94]) [sage] 2019/08/24(土) 10:37:01.45 ID:6mtETOAfH 前処理を細かく操りたいときにpython FWのAPI使わず外でやるとか FWだとパラメータをランダムに決めちゃったりするやん 仕様も不明なこともあるし http://mevius.5ch.net/test/read.cgi/tech/1561568018/731
732: デフォルトの名無しさん (アウアウクー MM5b-xv4K [36.11.225.157]) [sage] 2019/08/24(土) 10:43:13.57 ID:qCxUPpqHM >>731 データのパラメーターをランダムで勝手に変更するライブラリなんて逆にあるのか あるなら画像処理か音声処理だと思うんだけど 少なくとも、OpenCVにはそんな仕様は絶対ないな http://mevius.5ch.net/test/read.cgi/tech/1561568018/732
733: デフォルトの名無しさん (オッペケ Sr5b-MlRc [126.133.200.13]) [] 2019/08/24(土) 13:28:01.66 ID:+Cso22+ur >>731 乱数シードを設定したら? http://mevius.5ch.net/test/read.cgi/tech/1561568018/733
734: デフォルトの名無しさん (トンモー MMcb-oH2O [210.142.95.37]) [] 2019/08/24(土) 16:35:58.07 ID:KBrwzPg6M >>729 知ってるよ 俺が作ったライブラリも お前が使ってそう http://mevius.5ch.net/test/read.cgi/tech/1561568018/734
735: デフォルトの名無しさん (トンモー MMcb-oH2O [210.142.95.37]) [] 2019/08/24(土) 16:39:43.79 ID:KBrwzPg6M >>731 Pythonのライブラリは きっちりバージョン合わせないと 変なことになるぞ だから完全自立人型ロボットの リアルタイム処理には Pythonなんて絶対に使えない 自動運転もそう 実験では使えても 実装じゃ絶対使わない つか使ってるメーカ―なんて ないから http://mevius.5ch.net/test/read.cgi/tech/1561568018/735
736: デフォルトの名無しさん (アウアウカー Sa3b-c9SO [182.251.141.203]) [sage] 2019/08/24(土) 17:02:22.19 ID:hHTykqqra 誰もロボットや自動運転に組み込む話なんてしてないのに何をいきなり語りだしてるんだろう http://mevius.5ch.net/test/read.cgi/tech/1561568018/736
737: デフォルトの名無しさん (ワッチョイ bfda-gQHD [223.218.154.205]) [sage] 2019/08/24(土) 17:03:32.62 ID:OJKjIaGu0 改行爺さんだろ http://mevius.5ch.net/test/read.cgi/tech/1561568018/737
738: デフォルトの名無しさん (ワッチョイ bfab-JHzk [39.111.85.105]) [sage] 2019/08/24(土) 17:38:34.90 ID:ioeZFbio0 ライブラリよりGCがあるから使わないでしょ。 そもそもロボットのOSで動くLLなぞ無いような http://mevius.5ch.net/test/read.cgi/tech/1561568018/738
739: デフォルトの名無しさん (アークセー Sx5b-m4OL [126.165.5.76]) [sage] 2019/08/24(土) 17:46:34.83 ID:VcLVuM9Px >>735 自動車業界はMatlabじゃないの? 部門によるのかな http://mevius.5ch.net/test/read.cgi/tech/1561568018/739
740: デフォルトの名無しさん (アークセー Sx5b-m4OL [126.165.5.76]) [sage] 2019/08/24(土) 18:10:12.90 ID:VcLVuM9Px >>738 Luaとか? リアルタイム処理の前処理と一般的な機械学習の前処理はなんかレイヤーの違う話に感じるけど同列に議論するものなの? リアルタイム処理の前処理って機械学習の推論側だよね?そしたら好きな言語で書いてONNX形式にしてTensorRTが今時なんじゃないのとか思ったり C/C++が面倒だというのを批判したいだけ?私も相当C++を書くけど面倒くさくてPythonばっかり使うわ http://mevius.5ch.net/test/read.cgi/tech/1561568018/740
741: デフォルトの名無しさん (ワッチョイ bfab-JHzk [39.111.85.105]) [sage] 2019/08/24(土) 18:32:17.56 ID:ioeZFbio0 ワイもワイも pythonで足りる許されるなら使うよ http://mevius.5ch.net/test/read.cgi/tech/1561568018/741
742: デフォルトの名無しさん (ワッチョイ 2759-xv4K [36.2.42.152]) [sage] 2019/08/24(土) 18:33:23.46 ID:kpdhu7+D0 armsのボードを入れてるだけのところが多いけど、 俺は底辺だったからなあ http://mevius.5ch.net/test/read.cgi/tech/1561568018/742
743: デフォルトの名無しさん (ワッチョイ 2759-xv4K [36.2.42.152]) [sage] 2019/08/24(土) 18:33:52.13 ID:kpdhu7+D0 armな http://mevius.5ch.net/test/read.cgi/tech/1561568018/743
744: デフォルトの名無しさん (ワッチョイ 2701-bCZX [126.26.34.63]) [sage] 2019/08/24(土) 20:46:34.78 ID:u6taJwr50 >>727 ちゃんと計測してから物言おうな。 今のpythonで100万行のデータ取り扱っても数十秒だから。 んで持ってpythonでてきとうな処理書くのなんて数分でできる。 c/c++でまともなデータ処理コード書こうと思った恐ろしく時間かかるわ。 まともに使ったこともないくせに理論上のランタイム速度だけで議論しようとするのは 愚かなことだよ。 http://mevius.5ch.net/test/read.cgi/tech/1561568018/744
745: デフォルトの名無しさん (ワッチョイ 87b0-P0k6 [122.16.225.100]) [sage] 2019/08/24(土) 21:04:05.83 ID:+PLwcW2w0 >今のpythonで100万行のデータ取り扱っても数十秒だから。 ちゃんと計測してから物言おうとか言いながら、処理内容も限定せずにこんなこと言っちゃう矛盾 http://mevius.5ch.net/test/read.cgi/tech/1561568018/745
746: デフォルトの名無しさん (ワッチョイ 2701-bCZX [126.26.34.63]) [sage] 2019/08/24(土) 21:22:27.68 ID:u6taJwr50 csvでてきとうなカラム50〜60のデータを処理する場合だよ。 イチャモン付けしたいだけで何も提示しないバカは黙ってろよ。 http://mevius.5ch.net/test/read.cgi/tech/1561568018/746
747: デフォルトの名無しさん (アウアウクー MM5b-xv4K [36.11.224.191]) [sage] 2019/08/24(土) 21:31:02.73 ID:5wabu85BM モデルは最新の決定木だろ。データ分析を想定してる? http://mevius.5ch.net/test/read.cgi/tech/1561568018/747
748: デフォルトの名無しさん (ワッチョイ 87b0-P0k6 [122.16.225.100]) [sage] 2019/08/24(土) 21:32:47.84 ID:+PLwcW2w0 だからその「処理」の内容次第で数十秒で済むのか数十時間かかるのか変わるだろ。 csvとか言っているところを見るともしかして前処理の時間の方を言っている? そうだとしたら話がかみ合わんわけだわ。 http://mevius.5ch.net/test/read.cgi/tech/1561568018/748
749: デフォルトの名無しさん (アウアウクー MM5b-xv4K [36.11.224.191]) [sage] 2019/08/24(土) 21:34:22.96 ID:5wabu85BM C言語は画像処理の分野で使われていて、 まともなところはpythonでまずモデルを作って精度を測ってから実装に移る あとCやjavaで業務をこなしているけど、実はpythonで十分な案件も多々ある てか、そんなのばかり http://mevius.5ch.net/test/read.cgi/tech/1561568018/749
750: デフォルトの名無しさん (ワッチョイ e7da-gQHD [60.35.88.143]) [sage] 2019/08/24(土) 21:53:51.45 ID:dydE/XPA0 ソンのarm7 http://mevius.5ch.net/test/read.cgi/tech/1561568018/750
751: デフォルトの名無しさん (ワッチョイ e7ad-9WLl [124.144.197.178]) [] 2019/08/24(土) 22:09:09.80 ID:RkH4AGAO0 >>744 100万行? なにいってんだ馬鹿 そんなちっちゃなデータしか扱ったことがないのか!!!??? ホント視野の狭いFランの馬鹿は困る データ分析には想像力も必要なんだぞ? ま、いまどきの若いのはExcelがちょっと使えるだけで データサイエンティストだから(笑) NTTデータ先端技術が地方から集めてきた馬鹿の仲間か? http://mevius.5ch.net/test/read.cgi/tech/1561568018/751
752: デフォルトの名無しさん (アークセー Sx5b-m4OL [126.165.5.76]) [sage] 2019/08/24(土) 22:20:42.42 ID:VcLVuM9Px >>751 データサイズで人を馬鹿にするのはよしなさい そんなのは業務によるもの あと学歴をすぐに持ち出すのはコンプレックス丸出しでみっともないですよ 私の感覚ではデータ量が増えれば増えるほどプログラミング言語より分散処理に重要度がシフトする気がしますね http://mevius.5ch.net/test/read.cgi/tech/1561568018/752
753: デフォルトの名無しさん (アウアウクー MM5b-xv4K [36.11.224.191]) [sage] 2019/08/24(土) 22:37:18.77 ID:5wabu85BM kaggleを大規模なコンペに参加したことある奴おる? ブレンド勝負に突入したんだけど、特徴量の選択とモデルのパラメーターをちょくちょく変えて、沢山のcsvファイルを作ってブレンドするのが底辺の戦術でOKかね kernelで明らかにアイディアが出尽くしていて辛い http://mevius.5ch.net/test/read.cgi/tech/1561568018/753
754: デフォルトの名無しさん (アークセー Sx5b-m4OL [126.165.5.76]) [sage] 2019/08/24(土) 22:49:13.50 ID:VcLVuM9Px >>753 最適化合戦になると性能のいいハードが用意できないと勝てないかなぁ 外人って飯の種となりそうな凄いカーネルをあっさり出すよね http://mevius.5ch.net/test/read.cgi/tech/1561568018/754
メモ帳
(0/65535文字)
上
下
前
次
1-
新
書
関
写
板
覧
索
設
栞
歴
あと 248 レスあります
スレ情報
赤レス抽出
画像レス抽出
歴の未読スレ
Google検索
Wikipedia
ぬこの手
ぬこTOP
0.020s