２ちゃん画像落としまくりスクリプト (294ﾚｽ)
２ちゃん画像落としまくりスクリプト http://mevius.5ch.net/test/read.cgi/unix/1003833552/
上
下
前
次
1-
新
通常表示
512ﾊﾞｲﾄ分割
ﾚｽ栞
1: 1 [] 01/10/23 19:39 ２ちゃんねるに貼ってある画像リンクを追い、 jpgをかき集めるスクリプトを作ってみました。 http://www.ninnin.net/ ※perlとwgetが必要です。 ※Windows,Macでは動きません。 http://mevius.5ch.net/test/read.cgi/unix/1003833552/1
2: 名無しさん＠お腹いっぱい。 [sage] 01/10/23 19:49 windows で perl も wget も動くはずだが。 http://mevius.5ch.net/test/read.cgi/unix/1003833552/2
3: 1 [] 01/10/23 19:50 fork 使ってるからActive perlでは動かないのですよ。 cygwin上なら動くかも（ためしてないけど） http://mevius.5ch.net/test/read.cgi/unix/1003833552/3
4: 1 [] 01/10/23 19:53 追記： MacOS Xなら動きますよ （10.1ならwgetを入れなきゃだめだけど） http://mevius.5ch.net/test/read.cgi/unix/1003833552/4
5: 名無しさん＠お腹いっぱい。 [] 01/10/23 19:56 ｸﾞﾛ画像ｺﾜｲﾖ(；´д｀) http://mevius.5ch.net/test/read.cgi/unix/1003833552/5
6: 1 [] 01/10/23 20:03 例えばモー娘板で 一回スクリプトを実行すると 約８００枚の画像が収集できます。 http://mevius.5ch.net/test/read.cgi/unix/1003833552/6
7: 名無しさん＠お腹いっぱい。 [sage] 01/10/23 21:11 UNIX板的にはどうかと思うがサンクス１ http://mevius.5ch.net/test/read.cgi/unix/1003833552/7
8: ソースコード読まずにカキコ [sage] 01/10/23 21:15 Σ（ﾟдﾟｌｌｌ）ｶﾞｰﾝ アイドル画像板でやったら最初の画像が葉っぱ隊だった しかも何かループしてて同じ画像だけ取ってるっぽい。 42枚しか収集できなかった。 http://mevius.5ch.net/test/read.cgi/unix/1003833552/8
9: UNIX すごい。 [] 01/10/23 21:21 MacOS X ですがやってみました。 こんなこともできるんですね。目からウロコです。 中にはとても重たいサーバーがあるので、可能であれば タイムアウトのパラメータも追加されるとうれしいです。 （３０秒以上反応が無かったらスキップして次、など） perl スクリプトとか詳しくないのに勝手言っちゃってすいません。 http://mevius.5ch.net/test/read.cgi/unix/1003833552/9
10: 名無しさん＠お腹いっぱい。 [sage] 01/10/23 21:27 cygwinのperlでも動いた。 ただ $down デフォルトは、せめて2くらいに しておいた方が良くないかい? もしくは固定とか。 サーバに申し訳なくて5は指定出来ん。 http://mevius.5ch.net/test/read.cgi/unix/1003833552/10
11: 名無しさん＠お腹いっぱい。 [sage] 01/10/23 21:34 mpegも落としたいが.... 醤油みたけど直すのメンドイな http://mevius.5ch.net/test/read.cgi/unix/1003833552/11
12: 名無しさん＠お腹いっぱい。 [sage] 01/10/23 22:19 こういうのは自分で書いた方が良さげ。 http://mevius.5ch.net/test/read.cgi/unix/1003833552/12
13: 1 [] 01/10/23 23:39 1です。 >>8 アイドル版ならもっと集まるはず。取得スレ数リミットをもっとあげてみよう。 >>9 wgetのパラメータをいじればできます。現在の設定は２分です。 今後調整します。スクリプトの１５３行目をいじれば変更もできますよ。 >>10 その通りですね。次回のバージョンから少し下げます。 >>11 73,74,84行目の.jpgを.mpgに変更すればＯＫなはずです。 http://mevius.5ch.net/test/read.cgi/unix/1003833552/13
14: 名無しさん＠お腹いっぱい。 [] 01/10/23 23:44 ｶﾞ━━(ﾟДﾟ;)━━ｿ! よろこびいさんで半角板いったらなんもなかった http://mevius.5ch.net/test/read.cgi/unix/1003833552/14
15: 名無しさん＠お腹いっぱい。 [sage] 01/10/23 23:47 おおお、すごいね。ガンガン落とせるよ。でも鯖の負荷がすごそう なのでsage進行の方が良いかな…。 ところで、これで落とした画像を閲覧するスクリプトとか、 どうやって作るんだろう？ 手動でeeで見てるんだけど、再帰的に .jpgファイルを見るスプリプト？とかありそうなんですが。 http://mevius.5ch.net/test/read.cgi/unix/1003833552/15
16: 名無しさん＠ＸＥｍａｃｓ [] 01/10/24 01:00 やっぱ wget を fork して…ってのはみんな書くのね(笑) ウチの環境だと wget は 2 個くらい fork するのが一番 効率が良かったかなぁ。 # fork しすぎると timeout して、 # まともに取れなかったりして… >15 find ./ -name '*.jpg' -exec display \{\} \; とか? XEmacs の dired も、よく使いますけど。。。 http://mevius.5ch.net/test/read.cgi/unix/1003833552/16
17: 名無しさん＠お腹いっぱい。 [sage] 01/10/24 01:08 迷惑画像URLリストとか、どこかにないでしょうか。 フィルタリングしたいですよね。 http://mevius.5ch.net/test/read.cgi/unix/1003833552/17
18: 名無しさん＠お腹いっぱい。 [sage] 01/10/24 01:26 find ./ -name '*.jpg' |xargs ElectoricEyes http://mevius.5ch.net/test/read.cgi/unix/1003833552/18
19: 名無しさん＠お腹いっぱい。 [sage] 01/10/24 01:36 半角板のDATってどこにあるす？ つーか何もないのはおかしいよね。 http://mevius.5ch.net/test/read.cgi/unix/1003833552/19
20: 名無しさん＠お腹いっぱい。 [sage] 01/10/24 01:41 >>15 スクリプトじゃないけどgqviewとかpicviewとかじゃだめなん？ http://mevius.5ch.net/test/read.cgi/unix/1003833552/20
21: 124 [] 01/10/24 03:03 こんなことができるのは常時接続の人たちですか? http://mevius.5ch.net/test/read.cgi/unix/1003833552/21
22: うひひ [sage] 01/10/24 09:28 >>21 情事切実な人だな。 http://mevius.5ch.net/test/read.cgi/unix/1003833552/22
23: 名無しさん＠お腹いっぱい。 [] 01/10/24 10:38 >>19 半角板だと $ita = http://okazu.bbspink.com/ascii/ の設定でＯＫなはず http://mevius.5ch.net/test/read.cgi/unix/1003833552/23
24: 名無しさん＠お腹いっぱい。 [] 01/10/24 13:07 ｈｔｔｐ://とか ttp:// みたいにあえてコピペ用になってる物も 落とせる？ http://mevius.5ch.net/test/read.cgi/unix/1003833552/24
ﾒﾓ帳
(0/65535文字)
上
下
前
次
1-
新
書
関
写
板
覧
索
設
栞
歴
あと 270 ﾚｽあります
ｽﾚ情報
赤ﾚｽ抽出
画像ﾚｽ抽出
歴の未読ｽﾚ
AAｻﾑﾈｲﾙ
Google検索
Wikipedia
ぬこの手
ぬこTOP
0.006s