2ちゃん画像落としまくりスクリプト (294レス)
上下前次1-新
1(21): 1 01/10/23 19:39 AAS
2ちゃんねるに貼ってある画像リンクを追い、
jpgをかき集めるスクリプトを作ってみました。
外部リンク:www.ninnin.net
※perlとwgetが必要です。
※Windows,Macでは動きません。
2: 01/10/23 19:49 AAS
windows で perl も wget も動くはずだが。
3: 1 01/10/23 19:50 AAS
fork 使ってるからActive perlでは動かないのですよ。
cygwin上なら動くかも(ためしてないけど)
4: 1 01/10/23 19:53 AAS
追記:
MacOS Xなら動きますよ
(10.1ならwgetを入れなきゃだめだけど)
5: 01/10/23 19:56 AAS
グロ画像コワイヨ(;´д`)
6(1): 1 01/10/23 20:03 AAS
例えばモー娘板で
一回スクリプトを実行すると
約800枚の画像が収集できます。
7: 01/10/23 21:11 AAS
UNIX板的にはどうかと思うがサンクス1
8(1): ソースコード読まずにカキコ 01/10/23 21:15 AAS
Σ(゚д゚lll)ガーン
アイドル画像板でやったら最初の画像が葉っぱ隊だった
しかも何かループしてて同じ画像だけ取ってるっぽい。
42枚しか収集できなかった。
9(1): UNIX すごい。 01/10/23 21:21 AAS
MacOS X ですがやってみました。
こんなこともできるんですね。目からウロコです。
中にはとても重たいサーバーがあるので、可能であれば
タイムアウトのパラメータも追加されるとうれしいです。
(30秒以上反応が無かったらスキップして次、など)
perl スクリプトとか詳しくないのに勝手言っちゃってすいません。
10(1): 01/10/23 21:27 AAS
cygwinのperlでも動いた。
ただ $down デフォルトは、せめて2くらいに
しておいた方が良くないかい? もしくは固定とか。
サーバに申し訳なくて5は指定出来ん。
11(1): 01/10/23 21:34 AAS
mpegも落としたいが....
醤油みたけど直すのメンドイな
12: 01/10/23 22:19 AAS
こういうのは自分で書いた方が良さげ。
13: 1 01/10/23 23:39 AAS
1です。
>>8
アイドル版ならもっと集まるはず。取得スレ数リミットをもっとあげてみよう。
>>9
wgetのパラメータをいじればできます。現在の設定は2分です。
今後調整します。スクリプトの153行目をいじれば変更もできますよ。
>>10
省3
14: 01/10/23 23:44 AAS
ガ━━(゚Д゚;)━━ソ!
よろこびいさんで半角板いったらなんもなかった
15(2): 01/10/23 23:47 AAS
おおお、すごいね。ガンガン落とせるよ。でも鯖の負荷がすごそう
なのでsage進行の方が良いかな…。
ところで、これで落とした画像を閲覧するスクリプトとか、
どうやって作るんだろう? 手動でeeで見てるんだけど、再帰的に
.jpgファイルを見るスプリプト?とかありそうなんですが。
16: 名無しさん@XEmacs 01/10/24 01:00 AAS
やっぱ wget を fork して…ってのはみんな書くのね(笑)
ウチの環境だと wget は 2 個くらい fork するのが一番
効率が良かったかなぁ。
# fork しすぎると timeout して、
# まともに取れなかったりして…
>15
find ./ -name '*.jpg' -exec display \{\} \;
省2
17(1): 01/10/24 01:08 AAS
迷惑画像URLリストとか、どこかにないでしょうか。
フィルタリングしたいですよね。
18: 01/10/24 01:26 AAS
find ./ -name '*.jpg' |xargs ElectoricEyes
上下前次1-新書関写板覧索設栞歴
あと 276 レスあります
スレ情報 赤レス抽出 画像レス抽出 歴の未読スレ AAサムネイル
ぬこの手 ぬこTOP 0.014s