[過去ログ] お勧めダウンロード(丸ごと取り込み)ソフト3 (1002レス)
1-

このスレッドは過去ログ倉庫に格納されています。
次スレ検索 歴削→次スレ 栞削→次スレ 過去ログメニュー
297: 2008/08/31(日) 01:18:45 ID:ISN52Ea80(1)調 AAS
女神板は2chじゃないから
298: 2008/09/10(水) 10:20:54 ID:TJ6Ap/Sl0(1/4)調 AAS
ここの移転先教えてくれ
外部リンク:sdn255.web.fc2.com
299: HrSPwiYUsMDh [jokwdm@wdgift.com] 2008/09/10(水) 10:26:13 ID:ddMYkNpg0(1)調 AAS
g7z0zX <a href="外部リンク:baqkzgurctep.com">baqkzgurctep</a [url=外部リンク:knccjehvsqoe.com]knccjehvsqoe[/url], [link=外部リンク:fyoddmbvukja.com]fyoddmbvukja[/link], 外部リンク:kfeaukherzmc.com
300: 2008/09/10(水) 10:53:49 ID:TJ6Ap/Sl0(2/4)調 AAS
準州で取得したHTMLに元のページのタイトルを入れてダウンロードする方法も頼む。
301: 2008/09/10(水) 11:19:00 ID:iOGDU/hx0(1)調 AAS
他人にきちんと説明出来ないことと
自力で解決出来ないことはコインの両面である
302: 2008/09/10(水) 12:06:11 ID:TJ6Ap/Sl0(3/4)調 AAS
ちょw

たとえば、
ブログタイトルhogeというのがあって
hogeの9月8日の日記のタイトル名がhoge-hageだとしたら
現状ではURL名でしか取得できないけど、hoge-hage.htmlという形で取得したいの!
303: London [scyafd@mygrqr.com] 2008/09/10(水) 12:13:50 ID:iwCGOnB80(1)調 AAS
wAetOc <a href="外部リンク:jphcmeellktk.com">jphcmeellktk</a [url=外部リンク:auiaplkzgrwg.com]auiaplkzgrwg[/url], [link=外部リンク:unnngecegnmn.com]unnngecegnmn[/link], 外部リンク:hxtuikvjgkcq.com
304: 2008/09/10(水) 12:18:18 ID:Cga7s0C10(1)調 AAS
ファイル名を変えたらリンクが正しく動作しなくなるだろ…
305: 2008/09/10(水) 16:40:55 ID:aLDvX6Aj0(1)調 AAS
巡集の作者、もしかして株で死んじゃったとか・・・?
306: 2008/09/10(水) 23:10:10 ID:TJ6Ap/Sl0(4/4)調 AAS
不吉なこと言うなダニよ

ソース公開して欲しい
307: 2008/09/10(水) 23:35:48 ID:S8J67L6Y0(1)調 AAS
巡集
Teleport Pro(俺はUltra)
この2本立てで困ったことないな

後者に金を払う気があるかは本人次第
308: [age] 2008/09/13(土) 15:46:14 ID:Dn+RZDfP0(1)調 AAS
ブログでぜったいありえない1990年代前の日記等を除外するにはどうすればいいですか?
白紙ページを延々とダウンロードするので鯖にも悪いし
309: 2008/09/14(日) 20:11:32 ID:ukWyxLCq0(1)調 AAS
禁止URLとかの機能使えばいいじゃん。
310: 2008/09/23(火) 18:50:45 ID:twI/75ox0(1)調 AAS
結構大きいサイトを巡集でダウンロードしたいけどうまくいかない。
料理レシピサイトを落としたいんだけど以前落とした時は
検索結果が出てくれなかったりリンク切れがあったりして完璧にはできなかったから
どうにかして完璧に落としたいんだけど1個1個アドレスをいれるしかない?
ちなみにエキサイトのレシピサイトを落としたい。
311: [age] 2008/09/24(水) 01:46:37 ID:hKMSKtdw0(1)調 AAS
>>273 ID:t9WSIx9k0
一、●持ちしか見れないある板のスレ全部を保存したい。
二、一で保存したものを再うpしたい。

一、か二かどっち?

二だとしたらやってはいけないようだ(ソースらしきもの)↓
したらばスレ:computer_682
>やめてくれっていわれたんで(^^;

↑ひろゆきに言われたのか運営の誰かに言われたのかは不明。
312: 2008/09/24(水) 13:41:28 ID:1PhPO/s90(1)調 AAS
>273
亀レスだが「2ちゃんねるコンバーター DAT2HTML」を使えば、>275も書いたように
スレッドタイトル=ファイル名で、専ブラで保存した大量のdatをhtmlかtxtに一括変換可。
313
(5): 2008/10/06(月) 15:35:55 ID:eO1CMKz50(1/4)調 AAS
こんなソフトありませんか?スレから来ました。

fc2などの画像サーバーが独立したWebサイトにも対応した
丸ごととりこみ保存するソフトを探しています。

現在は WeBoXをつかっているのですが、
fc2のブログなどでは、画像サーバーが別サーバーなので
同じブログ内でもリンク先画像などが取り込むことができません。
このような状況に対応できるダウンローダーはありませんでしょうか?

コマンドラインで使う類のソフトでもかまいません。
314: 313 2008/10/06(月) 16:31:57 ID:eO1CMKz50(2/4)調 AAS
Getleftでサイトを丸ごと落としオフライン鑑賞 :教えて君.net
外部リンク[html]:www.oshiete-kun.net

外部リンクを1リンクだけたどって保存できればよいのか?ということで、
こちらのソフトを使ってみているのですが、
下記のようなエラーが頻発し、スキップしても止まってしまうのでダウンロードできません。
困ってしまいました・・・。

could not read "(パス)/blog.fc2.com/tag/£A£O": no such file or directory
could not read "(パス)/blog.fc2.com/tag/£A£O": no such file or directory
while executing
"file size $fileName"
(procedure "DownloadLinks" line 39)
invoked from within
"DownloadLinks $urlList $referer $level"
(procedure "Descargar::ControlDownloading" line 21)
invoked from within
"Descargar::ControlDownloading $requestedUrl 1"
(procedure "StartDownload" line 76)
invoked from within
"StartDownload $requestedUrl"
(procedure "AutomaticDownload" line 21)
invoked from within
"AutomaticDownload [mainWin::UrlListSelectedUrl]"
invoked from within
".extFrame.iconFrame.left.start invoke "
invoked from within
".extFrame.iconFrame.left.start instate {pressed !disabled} { .extFrame.iconFrame.left.start state !pressed; .extFrame.iconFrame.left.start invoke } "
(command bound to event)
315: 313 2008/10/06(月) 18:17:34 ID:eO1CMKz50(3/4)調 AAS
wgetで試行錯誤してみたらうまくいきました。

wgetで一旦htmlのみを取得し、
Rubyのスクリプトで画像サーバーのURLを列挙して(↓な感じの)

urls = []
Dir.glob("hogehoge.blog45.fc2.com/*.html") do |file|
  puts file
  urls += File.read(file).scan(/blog-imgs-[^\.]*\.fc2\.com/).uniq
end
puts urls.uniq

以下の様に、-D でダウンロードするホストを限定したらうまくいったようです。
wget -rH -l 3 --convert-links -o log.txt -Dhogehoge.blog45.fc2.com,blog-imgs-21.fc2.com,blog-imgs-30.fc2.com,blog-imgs-1.fc2.com,blog-imgs-12.fc2.com 外部リンク:hogehoge.blog45.fc2.com

--convert-linksなどをつけないとリンクが相対リンクならないので注意というのと、
あと、fc2は.htmlとなっていてもどうやら動的生成なようで
カレンダーのリンクのせいか、-l 0にすると無限にダウンロードしつづけるため注意です。
(一回やらかしました)
316: 313 2008/10/06(月) 18:21:17 ID:eO1CMKz50(4/4)調 AAS
wgetでドメインをまたぐ設定(-D)がワイルドカード指定できれば簡単だったのですが・・・
この辺、Unix系の板で聞いてみます。
317
(1): 2008/10/07(火) 00:37:00 ID:k78/uLlJ0(1/2)調 AAS
>>313
横レスすみません。レスとても参考になりました。
wgetをwinXPで使いたいのですが
DLできるところ教えてください。
318
(1): 313 2008/10/07(火) 05:40:38 ID:hu35XLEh0(1)調 AAS
>>317
私はcygwinというUNIX風のプログラムを動かす環境をWindowsで入れていましたので、
それでインストールしましたが、
ふつうのWindowバイナリは「wget windows」でぐぐったら見つかりました。

Wget for Windows
外部リンク[htm]:gnuwin32.sourceforge.net

wget(Windows版) - 俺の基地
外部リンク[php]:yakinikunotare.boo.jp

この辺ではないでしょうか?試してはないですが。
wgetはコマンドラインのツールなので注意です。
私はバッチファイルを書いて実行してます。
319: 2008/10/07(火) 06:33:16 ID:k78/uLlJ0(2/2)調 AAS
>>318
ありがとうございます!これでやってみます。
320
(1): 2008/10/07(火) 07:56:16 ID:pjeOFoUzO携(1)調 AAS
パンドラの動画をダウンロードしてiPodに入れるやり方教えて下さい
321: 2008/10/09(木) 19:17:17 ID:rJyyGwzD0(1)調 AAS
巡集ってDLしたファイルを消す方法って
フォルダ排除と設定ファイル排除しかない?
322: 2008/10/11(土) 23:38:49 ID:UlAef+iX0(1)調 AAS
>>320
パンドラHD導入してファイル落とせばHD仕様の動画はMP4だからそのままipod出来る。
ノーマルはFLVファイルだからエンコしてipodで見られる形式の動画に変換する。
323: 2008/10/14(火) 05:43:24 ID:CWdTo3bh0(1)調 AAS
外部リンク:users.ugent.be
324: 2008/10/18(土) 09:14:27 ID:NA8ZY32U0(1)調 AAS
マグノリア、手軽にWebページをスクラップ「ホームページスクラップブック」
保存したWebページをPDF/JPEGファイルへ書き出す機能も

外部リンク[html]:www.forest.impress.co.jp
325: 2008/10/20(月) 21:48:39 ID:SV8NrUaK0(1/2)調 AAS
苦闘の末DLがうまくいったので記念カキコ。(無駄に長い
認証必要なサイトのDLのためにいろいろ試したので…。

1. Website Explorer
ずっと昔に出会ったソフトがこれだったので、ずっとこれを使ってた。
認証も手軽にできて、細かい設定無しにDLしやすかったのですが、
膨大なデータ(100000ファイル超)のサイトの場合、
解析時のキャッシュが増えるにつれて、かなり処理が重くなる。
負けずに数日動かしていたのですが、
私が馬鹿やってエラー落ちしたので別ソフトを探しました。

2. WinHTTrack
複数URL指定ができていい感じ?
いくつかのサイトを落とすときに利用して気に入った。
しかし、認証に弱い…。
認証に成功するサイトもあるのかもしれませんが、私が試したサイトではダメでした。
どうでもいいかもですが、DLサイト目次みたいなindex.htmlが生成されますが、
charset=iso-8859-1→shift-jisにすれば日本語文字化けは解消されます。
326: 2008/10/20(月) 21:49:38 ID:SV8NrUaK0(2/2)調 AAS
3.WeBoX
DLを試しても一部のファイルしか落ちてこなくて使い物にならない。
恐らく、私が使い方を理解してないのが原因orz

4. Teleport Pro
レビューが少ないのは、日本語化されてないし、有料だからですかね…?
サイトの認証は簡単に成功しました。
DL時の階層保持や、HTML解析設定など、どこをいぢればいいのか少し迷いましたが、
ちょいちょい触ってるうちに理解しました。
結局、目当てのサイトのDLはこれのおかげでうまくいきました。ありがとう。

どうでもいいですが、DLしたサイトは東進 過去問データベースです。
327: 2008/10/20(月) 23:16:00 ID:vXNKs2Pn0(1)調 AAS
報告どうも
よく分からないけど海外製のが一番うまくいったりする場合もあるのね
328
(1): 2008/10/21(火) 06:16:41 ID:r9pcwQQ+0(1)調 AAS
追記
Teleport Proは65530ファイルでDLを打ち切る様子。
329
(1): 2008/10/22(水) 14:47:13 ID:Uty5mEif0(1)調 AAS
FirefoxのScrapBookみたいに
すんなりスクラップできるソフトってありますか?
まるごとじゃなくてもいいんです・・・・
330: [age] 2008/10/26(日) 22:56:41 ID:Z0qQpGL90(1)調 AAS
>>328
使えにゃい。

>>329 スレ違い 紙とか。
331
(1): 2008/11/08(土) 09:57:14 ID:HMLV6FJZ0(1)調 AAS
サイトに入るときパス認証があってファイル毎DLページの前にDLKEY有るアップローダのファイルってDL出来るやつ有りますか?
パスもKEYも知ってるんですが何分ファイル数が多い(1500以上)もんで…
説明わかりにくくてすいません
332: 2008/11/09(日) 05:43:33 ID:r9fZofmi0(1)調 AAS
Firefoxのツールバー で使えて 埋め込み動画が落せるのって
ありませんか?
333: 2008/11/10(月) 12:34:07 ID:RJUgrUkx0(1)調 AAS
うん
334: 2008/11/12(水) 09:40:33 ID:199gHslN0(1)調 AAS
dlkey突破できる奴が有れば…
335: 2008/11/15(土) 02:12:07 ID:0sXE2VgW0(1)調 AAS
JustDiver 2.0
336: 2008/11/17(月) 23:17:57 ID:bYSAyiWi0(1)調 AAS
HTTrackを使っているんですが、FC2のサイトが保存出来ません。
2ヵ所ほど試したんですが、indexのhtmlファイルを1つ保存するだけで終了してしまいます。

デフォルトの状態で保存してみても、リンク全てを保存するを指定してみても駄目でした。
上手く保存する方法は無いでしょうか?
337
(1): 2008/11/26(水) 22:46:57 ID:AvoPmSlt0(1)調 AAS
外部リンク:www.doblog.com
ここのブログをコメントと画像を含めて
うまく保存する方法をよろしくお願いします orz
338: 337 2008/11/27(木) 07:07:22 ID:1gPOJKDS0(1)調 AAS
巡集にて下記ワイルドカード指定を行うことによって無限にダウンロードし続ける心配や
画像については何とかなったのではとおもいます。

外部リンク:www.doblog.com
外部リンク:img.doblog.com

残りはコメントです。 引き続きよろしくお願いします。 orz
339: 2008/11/27(木) 10:21:47 ID:o5f/E9xS0(1)調 AAS
「波乗野郎」が、立ち上げた途端に異常終了する。
何故だ。
今までは動いていたのに。
機械のOSは、XPホームエディション。

予備のWin2kの機械(ファイアウォールとかは同じソフト)でやってみると、
現在、普通に動作している。
XPでも、大昔の設定ファイルを使うと、ちゃんと起動するのだが。

沢山取得先を登録できて、毎週とか毎日とかの取得時間設定が出来て、
使い勝手が良いソフトなんで、捨てたくないんだよーん。
340: 2008/12/30(火) 21:06:37 ID:qDOzkieX0(1/2)調 AAS
もうこういうソフトは需要がないかねえ…
341: 2008/12/30(火) 21:58:34 ID:P2sFxOkY0(1)調 AAS
Wikiとかうまく保存が出来ないことが多いから使わなくなったよ。
ゲームの攻略Wikiとかを人がいない時間に保存して
混んでる時間は保存してる方を見たいんだけどな
342: 2008/12/30(火) 21:59:18 ID:qDOzkieX0(2/2)調 AAS
動的なWikiは根本的に保存に無理あるんじゃないかなあ
保存できるソフトを聞いたことがない
343: 2008/12/30(火) 22:10:50 ID:fX4eASw70(1)調 AAS
@wikiだったらhtmlだから追っかけることも可能ではあるのだろうけど、サイトごとDLは出来無くされてる見たいなんだよねえ
wikipediaなどはローカルで閲覧するにはデータベースその他を色々やらなきゃならないみたいだし、必要な記事は地道にブラウザ保存しかないかなあ
344: 2008/12/31(水) 09:18:41 ID:rscijB3A0(1)調 AAS
取り込みが出来ないから保存しなかったWikiが閉鎖した時は全俺が泣いた
特にゲーム攻略のWikiとかはよく消えてるから困る
345: 2009/01/02(金) 01:44:45 ID:OLqz4XAA0(1)調 AAS
FirefoxのScrapbookという拡張機能を使って、
ファイル一覧のページで一階層のみ保存、とか。
346
(1): 2009/01/03(土) 23:05:19 ID:PUJY1CSF0(1)調 AAS
Gethtmlについての質問です。

オプションの -f とはどのような機能なのでしょうか?
説明書ファイル(gethtml.txt)には
"-f Filename" Filename of / terminated URL
と書いてあるのですが意味がよくわかりません。

DL先のフォルダ名を指定するオプションと勘違いして使ってみたのですが、
そうではないようです。変な設定をしてしまったのではないかと思うと心配です。
347
(1): 2009/01/04(日) 10:03:30 ID:7KtylUIv0(1)調 AAS
>>346
gethtml.txt より
> ・"-f Filename"
> / で終わっている URL の WebPage データのファイル名を指定します。
> 例えば、URL が
> 外部リンク:www2s.biglobe.ne.jp
> の場合、得られたデータをどんな名前で保存すればよいか分かりません。
> 通常の場合、
> www2s.biglobe.ne.jp\~pockey\index.html なのですが、httpサーバに
> よって違い(MS のサーバは index.htm等)ますので、ここで指定します。
> index.html にしておくのが無難でしょう。デフォルトは index.html。
> 例) -f index.htm
348: 2009/01/04(日) 10:40:47 ID:agtqcM4Z0(1)調 AAS
>>347
大変申し訳ありません!見逃していました。
重ねてありがとうございます。
349: 2009/01/04(日) 11:31:36 ID:1GxGvmcA0(1)調 AAS
>>331
そういうのはRubyのWWW::mechanizeとか使えば楽勝だけどな・・・(Perlのでもいいけど)
350: 2009/01/04(日) 12:47:15 ID:zOoDAii/0(1)調 AAS
アダルトブログの全てのページの画像を一括DLできるソフトってないのでしょうか?
それができなければ、ページごとの画像だけをDLできるソフトというのはあるのでしょうか?
351: 2009/01/04(日) 20:29:51 ID:thlvUT4J0(1)調 AAS
サイト一括取り込みソフトを探していて、こんなのを見つけたがどんなもんか。
英語だけれど、使いやすい。
PageNest 外部リンク[html]:pagenest.com
WebStripper系譜のようだ。
352: 2009/01/06(火) 19:35:25 ID:HKJ+mumj0(1/2)調 AAS
ScrapBookに掘り下げ機能がありますがこれは指定したURLを含む所のみダウンロードする様には出来ないのでしょうか?
また、出来ないのであればこのような機能を持ったソフトはあるのでしょうか?
353: 2009/01/06(火) 23:49:18 ID:HKJ+mumj0(2/2)調 AAS
どうやらWeBOXで出来ますね、すみませんでした
354
(1): 2009/01/12(月) 18:55:19 ID:mtFSF/p40(1)調 AAS
以下の動的ページの取り込み方法(オフラインで見たい)がわかる方教えてください。
紹介されている一通りのダウンローダを試しましたが、うまくいきません。

外部リンク:www.gamebanshee.com

うまく取れないところは、このページの左のリストにある
EquipmentとSpellsのコンテンツでクリックすると右側にサブカテゴリが現れます。
更にクリックすると、ページの中央部に一覧表示されます。
これらをクリックするとONLINEではポップアップ画面が現れ、正常に表示するのですが、
ダウンローダでダウンロード後、OFFLINEで見ようとすると、うまく見れません。

宜しくお願いします。
355: 2009/01/12(月) 19:09:18 ID:Ad7xK/MA0(1)調 AAS

356
(1): 2009/01/14(水) 04:56:44 ID:XsghDILe0(1)調 AAS
基本的にHTMLをみて、ダウンローダーの特性を理解したら
なんとでもなるよ。
wgetなんかでもcssの中で@import とかは無視してくれちゃったり、
hoge.css@mageみたいなUファイル名とCSS指定をしてくれちゃったり、
実際の本物のホスト名を含む絶対アドレスになったいたり
こういうのがあるとサイトが正常に表示できない。

だからそういうのをHTMLを見て判断して、フィルターとなるスクリプトを書いてやれば
よほどの動的サイトでない限りはまるごとダウンロードいける
357: 2009/01/15(木) 04:50:49 ID:14aIogQH0(1)調 AAS
どなたか巡集でshinobi.jpの広告削除設定を
ご存知の方どうかご指南下さい
色々設定してみたけど全然上手くいきません…
358: 2009/01/15(木) 22:38:28 ID:SkpOdVD30(1)調 AAS
>>356
ご回答ありがとうございます。

スタイルシートについて、いろいろと調べたのですが、

リンク元のウィンドウで
<a href="#null" onClick="newWindow('/showshot.php?/neverwinternights/spells/images/balagarnsironhorn.jpg'・・・・)">.......
で新しいウインドウに画像のURLを渡し、

新しいウィンドウで
theShot = location.search.substring(1, location.search.length);
document.write('<img src=' + theShot + '>')
のように画像のURLを変数(上記の場合、theShot)に代入しているため、
URLがHTMLのソースに直接現れないような構造になっています。

このような場合はフィルタではどうしようもないと思うのですが、
何か良い手段はあるのでしょうか?
359: 2009/01/22(木) 10:04:12 ID:72T0n0l+0(1)調 AAS
  ↑
あっ ↑ は、>>354からの書き込みです。
360: 2009/01/22(木) 10:13:00 ID:LOPrZeW60(1)調 AAS
まあこれで正確にHTMLが解析できれば誰も苦労しない罠
当然俺は分かりません
361: 2009/02/08(日) 16:33:12 ID:1ew7wZVH0(1)調 AAS
あああ
362: 2009/02/17(火) 21:27:34 ID:swvN60Nx0(1)調 AAS
サーバー上には置いてあるけどHP内のどこのページからもリンクされてないファイルも全部ダウンロードってできますか?
363: 2009/03/03(火) 08:01:05 ID:hIoIaLsc0(1)調 AAS
無理
364
(1): 2009/03/04(水) 02:02:52 ID:iOzdqfhq0(1/2)調 AAS
巡集でwikiを丸ごと取れますか?なんだか非常に他のサイトと比べて時間がかかるので止めたのですが、wikiは取り込まない方が良いのですかね?
365: 2009/03/04(水) 12:44:56 ID:kOsE1mcy0(1)調 AAS
>>364
この世の全ての知識を手に入れようとゆうのかw
時間がかかって当然だろ、しかも正しい保障のない知識を
366: 2009/03/04(水) 20:52:19 ID:iOzdqfhq0(2/2)調 AAS
ああwikiっていってもWikipedia全てって訳じゃなくて○○ゲーム攻略とか○○の使い方みたいな1つのwikiの事だぜ
367: 2009/03/04(水) 22:03:51 ID:SjWqihRZ0(1)調 AAS
wikipediaはDLツール使うまでもなく、ローカル用のアーカイブが用意されているからね
ただ、dbソフトとか色々設定しなきゃならないから面倒そうだし、多重DLとかやって負荷掛けたらアク禁だったっけ?
368: 2009/03/05(木) 08:05:04 ID:5euH1yl80(1/3)調 AAS
例えばこういうサイトとかなんだけども
外部リンク[php]:foobar2000.xrea.jp
369
(2): 2009/03/05(木) 15:20:36 ID:y2etLDHA0(1)調 AAS
管理側ですぐばれてアク禁
370
(1): 2009/03/05(木) 19:05:28 ID:5euH1yl80(2/3)調 AAS
>>369
そうなのか、諦めるわ
371
(2): 2009/03/05(木) 22:13:12 ID:QC0/AZnI0(1)調 AAS
この程度でなるわけねー
372: 2009/03/05(木) 22:51:07 ID:5euH1yl80(3/3)調 AAS
>>371
そうなのかい?で巡集でやってみたら上手く取り込めなかったんだが、上手く取り込める方法を教えて貰えますか?
373
(1): 2009/03/06(金) 00:54:24 ID:xnM4IX3Z0(1)調 AAS
firefoxのscrapbookでのんびりと保存するのがベターかな
374: 2009/03/06(金) 14:01:59 ID:i20Uaw0U0(1)調 AAS
>>295
半年以上前の投稿だが、俺も同じ現象になった。
んで解決方法がわかった。DEP のセーフリストに
GetHTMLW.exe を登録すれば、おk。
375: 2009/03/06(金) 15:00:53 ID:PmwxrF/V0(1)調 AAS
>>373
回答ありがとう、やっぱ巡集と比べて面倒だけどそうするぜ巡集でも取れたら楽なのになぁ
376: 2009/03/07(土) 15:46:28 ID:EX6aOmt+0(1)調 AAS
>>369-371
検索エンジンのクロール程度でアク禁するようなのは、いつの時代の管理人だよw
377: 2009/03/20(金) 22:02:39 ID:JSyDiuTFP(1)調 AAS
hosyu
378: 2009/03/29(日) 05:41:06 ID:t09wwLl20(1)調 AAS
懐かしい話だ
379
(1): 2009/04/01(水) 18:48:18 ID:sW1brWClO携(1)調 AAS
CSS内の画像リンクも辿って保存してくれるソフトありますか?
GetHTMLWでは落としてくれませんでした。
JSやSWFも丸っと落としてくれるソフトあれば教えて下さい。
380: 379 2009/04/02(木) 11:54:11 ID:CFvsFsE+O携(1)調 AAS
すみません。解決しました。
381: 2009/04/03(金) 06:23:23 ID:oDGPoJNA0(1)調 AAS
俺と今後の為にどのソフトで解決したのかkwsk
382: 2009/04/04(土) 14:46:47 ID:izV7zIzI0(1)調 AAS
オラも知りたい
383: 2009/04/04(土) 19:11:59 ID:g6yEv4mBO携(1)調 AAS
ソフトを起動さえしとけば指定した時間に自動的に巡回して更新された部分を保存してくれるような
ソフトはないのでしょうか? 巡集を使っているのですが、そういった機能はないような
384: 2009/04/05(日) 04:43:52 ID:F1AvQ3H50(1)調 AAS
scrapbookはどうもMIMEタイプを誤認して、ダウンロード中にダイアログボックスを出すことがあります。
たとえば、mplという文字列がアドレスに含まれているページが、mplファイルという拡張子に誤認されてしまいます。
私は、MIMEエディットというソフトでしのぎましたが、本体の判別機能があまりうまく行っていないようなので、
ページによっては誤動作するという問題点があります。
scrapbookの問題ではないと思うので、ある意味致し方ないことだとは思いますが。
385: 2009/04/05(日) 13:25:58 ID:5dZaffZs0(1)調 AAS
すみませんが、質問です。
リンクをたどるだけでなく、ディレクトリの内容そのものを取得するダウンロー
ドツールはありませんか?

具体例を出しますと、
外部リンク:www6.airnet.ne.jp
このページから、以下のページにリンクが張られています。
外部リンク[html]:www6.airnet.ne.jp

この場合に、home.htmlを取得するだけでなく、その存在するディレクトリ
外部リンク:www6.airnet.ne.jp

も見に行き、(そこにindex.htmlなどが置かれていなくて)ディレクトリのファ
イル一覧が取得できたら、そのディレクトリのファイルを全部ダウンロードの
対象とする、という機能を持つツールを探しているのです。

このサイトでは、XMLファイルからXSLTファイルへのリンクがたくさん存在して
いて、通常のダウンロードツールだとXSLTファイルを取得することができませ
ん。しかしほとんどのディレクトリでファイル一覧を取得できるので、そこを
ダウンロード先に指定すれば、すべてのファイルをダウンロードできます。

今回は、巡集で www6.airnet.ne.jp/manyo/xml/ をまずダウンロード先に指定
し、ローカルに保存されたデータから、上記のxsltなどのサブディレクトリ名
を取得し(29個ありました)、それを全部、巡集に指定し、もう一度ダウンロー
ド行ないました。

しかしこれはかなり面倒なので、このような作業をすべてのサブディレクトリ
について自動的に行なってくれるツールがないかと思ったのです。

この機能は、外部JavaScriptやCSSから読み込まれるファイルの取得についても、
ある程度解決すると思うのですが、そういうツールはないでしょうか?
386: [age] 2009/04/05(日) 14:25:28 ID:At+ZdFLO0(1)調 AAS
wiki取り込む方法見つかった?
387: 2009/04/10(金) 22:39:16 ID:vy87VD8G0(1)調 AAS
CGIページをきちんと保存、再生できるソフトないの?
巡集だと再生するときカオスになる・・・
388: 2009/04/11(土) 15:12:26 ID:FJDV+iB10(1)調 AAS
2chスレ:software
【RunAsData】シェアウェアの試用期限クラック【HookDate】

アプリケーション開発における時間のからむ処理にて簡単にテストできて便利かもw
まあ、簡単に思いつくのは、わるいことばっかりだねw
だめだよ、そういうことに利用しちゃ。うふふ
もうひとつ、似たようなツールがあったのでこっちも紹介。

外部リンク[html]:blog.livedoor.jp
日時を誤解させた状態で起動させるツール「RunAsData」と「HookDate」
外部リンク[html]:dsas.blog.klab.org
Windows用フリーウェア「HookDate」を公開します

外部リンク[html]:softplaza.biglobe.ne.jp
ソフトのジャンルから探そう!体験版ソフトコーナー
外部リンク:soft.sigi-jp.net
体験版ソフト百貨
外部リンク[htm]:www.princess2.com
無料で使える体験版ソフト一覧

#ただし中には「Adobe Acrobat」(PDF作成用)のように、やっても効果が無いソフトもある。
389: 2009/05/17(日) 13:23:31 ID:/NzZAjoN0(1)調 AAS
 
390: 2009/05/25(月) 14:50:50 ID:03qdJTKV0(1)調 AAS
話題もないねえ…
391: 2009/05/25(月) 16:29:47 ID:Y24nZ+jT0(1)調 AAS
じゃあ、サイト丸ごと取り込みソフトが禁止されているサーバで、どうやってチェックをくぐり抜けてソフトで丸ごとDLするかとか考えるか。
UA規制程度なら各自で対処できるだろうし、ソレより上等な規制対象で。
392: 2009/06/08(月) 10:51:52 ID:AufSz18I0(1/2)調 AAS
t t p : / / g . e - h e n t a i . o r g /
ここ取り込める?
画像だけでもいいんだけど

向こうに知られるとまずいから
アドレスは切った
393: 2009/06/08(月) 11:34:03 ID:8JvAcKuU0(1)調 AAS
Refererくらい理解してから書き込めよ
394
(1): 2009/06/08(月) 21:29:18 ID:AufSz18I0(2/2)調 AAS
Refererは理解してる、が
取り込みソフト拒否されてるっぽいんだよねここ
395: 2009/06/10(水) 19:59:37 ID:/w+HilEi0(1)調 AAS
PCにあまり詳しくないんですが簡単な動画ダウンロードソフトでおすすめありますか?
396: 2009/06/11(木) 09:32:33 ID:CI9JV7KS0(1/2)調 AAS
とりあえずyahooの質問集でもクグッて質問しような?

ImageGeter使ってみな
サムネイル画像のリンク先に欲しい画像がある場合でも取ってくれる
使い方はyahoo見ろよ
397: 2009/06/11(木) 10:13:00 ID:CI9JV7KS0(2/2)調 AAS
ああ、それと。
場所によっては対ダウンロードソフトを敷いてるところもあるから、
リンク追跡は1個にしときなよ。

下手するとBANされて8時間待機とかなけるから。
設定は登録したリンクから変えられる。
398
(1): [age] 2009/06/13(土) 01:37:45 ID:HDt2gcxv0(1)調 AAS
wikiまるごと保存できるソフトなイノ?
399: 2009/06/14(日) 01:10:44 ID:7qssCspA0(1)調 AAS
>>394
このスレから外部リンク:g.e-hentai.org
へのrefererの話をしていると思われ
400: 2009/06/23(火) 17:45:38 ID:rUYeky/o0(1)調 AAS
>>398
フリーじゃないけど
A1 Website Download 
javascriptリンクも変換して保存可能らしい
外部リンク:www.microsystools.com
401
(1): 2009/06/27(土) 22:03:23 ID:i2oYT4kJ0(1)調 AAS
巡集って
例えば今日ダウンロードしたページを明日ダウンロードしたら上書きされてしまいますよね?
そうしないように(日付ごとにページを分けるように)する方法って無いでしょうか?
402: 2009/06/27(土) 22:14:37 ID:DjFTSHEj0(1)調 AAS
手作業でリネーム
取り込む先のフォルダの名前を指定する

好きなのを選べ
403: 2009/07/18(土) 09:37:45 ID:fBBs6NrU0(1)調 AAS
波乗野朗使ってるんですが、スタイルシートに対応していないのか、最近のWEBサイトを取り込むとガタガタに崩れてしまいます。
フリーできちんと崩れず閲覧できる巡回ソフトがあれば教えてください。
404: 2009/08/01(土) 12:57:23 ID:yPfvTWSQ0(1)調 AAS
Bulk Image Downloader

これまでFree版を使用していたんだけど、有料onlyになったのかな?
CODEを入力しないと、起動しなくなった。FireFOXのアドオンもダメ。。。
便利だったのに、な。
外部リンク[php]:antibody-software.com
405
(2): 2009/08/07(金) 11:31:36 ID:O6rKHi3B0(1)調 AAS
ブログの画像だけを取り込むソフトないですか?

web image hunterを使ってみましたが広告の画像まで取り込んで管理がししにくいのと
どっからきたかわからない変な画像まで取り込んでしまってうまくいきません
よろしくお願いします
406: 2009/08/14(金) 01:11:21 ID:g2iL4TTl0(1)調 AAS
VIPダウンろーだ
外部リンク:vdlspt.bob.buttobi.net
2chとGazouBBSの一部専用 Javaアプレット製
407: 2009/08/16(日) 15:42:19 ID:F1VFlTYE0(1/2)調 AAS
>405
画像フィルタ使えばいいじゃん。
ブログの画像のURL見て、"画像リンク
"とかだったら、
URL(含まれる)ってとこに"外部リンク:xxx.com"を追加する。
408: 2009/08/16(日) 15:49:36 ID:F1VFlTYE0(2/2)調 AAS
>>405
追記。あと、広告なら大抵gifだからgifは外すとか、
わけわからん小さいサイズの画像取らないためにサイズを特定のサイズ以上にするとか。
web image hunterは検出力高いから、フィルタは必須。
409: 2009/08/17(月) 23:27:34 ID:zCh7YkeM0(1)調 AAS
javascript追跡に対応してるソフトってありますか?
410
(1): 2009/08/18(火) 19:59:35 ID:QE4ZdWoG0(1)調 AAS
imgboard.cgiのページをブラウザで閲覧してるとき、アドレスバーの表記は変化しません。
gethtmlwのproxymode2を使っていると、ページごとに異なるファイルとして保存されていたと思うのですが、
ver8.0.0ではできなくなっています。
prohibit.lwsに*psvで指定してもできないのですが、どうすればできるようになるのでしょうか?
411
(1): 2009/08/19(水) 15:14:37 ID:qmXb8rBu0(1)調 AAS
> imgboard.cgiのページをブラウザで閲覧してるとき、アドレスバーの表記は変化しません。

ページをPOSTメソッドで取得しているんだな。
設定の「POSTmethodも保存する」をチェック。
これで無理なら諦める。
412: 2009/08/20(木) 14:50:28 ID:gE/IvJew0(1)調 AAS
imagefap一括DLしたくして↓のページでやったんだけど
外部リンク[html]:pictadicts.blog38.fc2.com

ちゃんと展開してDLしてくれません。
他にお勧めの方法か解決策ってないでしょうか。
413: 410 2009/08/21(金) 02:07:18 ID:kCD6o2M50(1)調 AAS
>>411
>設定の「POSTmethodも保存する」をチェック。
この設定で希望どおりの動作になりました。ありがとうございます

prohibit.lwsに*psvで指定してあって、ページが実際に違うのに保存してくれないってことは、
「拡張子がcgiの単なるHTML」という扱いではないようですね
414
(1): 2009/09/13(日) 22:20:00 ID:4oE3F4nr0(1)調 AAS
まとめサイト(blog)の広告部分を取り除いて保存してくれるソフトないもんかな

紙copiで保存して余計な部分を(ry
 →サイズの大きなページで紙copiがザ・ワールド

BullzipやPrimoでPDFにして余計な部(ry
 →サイズの大きな(ryで一般保護法ナントカ

mhtで保存しておいて余計な部分を手動で削除する方法
 →mht編集ソフトが上手く読み込んでくれないサイトがある&サイズの大きな(ry

Wordにコピー&ペーストして(ry
 →レイアウトが原形を留めてくれない

Proxomitronで広告をフィルタリング
 →フィルタ設定した次の日に大量の広告アドレスが入れ替わってて萎えた

とりあえず普通に取り込みソフトで保存してそのまま表示してみるテスト
 →オンライン状態になるとiframeの広告ページに保存フォルダをrefererにしてうわなにをするやめr
415: 2009/09/14(月) 12:23:55 ID:PB1HOZh+0(1)調 AAS
>>414
広告アドレスはアカウントID指定しないで、ワイルドカード指定してる?
広告消しだったら、置換ソフト(複数ファイル一括処理タイプでワイルドカード使用)で取り除くとか、
ダウンローダでCompleteGetterっていうのにDL後ファイルバナー広告削除機能ついてる。
416: 2009/09/24(木) 20:00:50 ID:V1YBGQBI0(1)調 AAS
巡集使ってみたいのですがページが消えていてどこ探してもみつかりません。
どなたかDLできるサイト教えてください。もしくはUPお願いできませんか?
417: 2009/09/24(木) 22:31:22 ID:n+r1nZD00(1)調 AAS
巡集消えてるね。
いいソフトだったのに残念だ。
418
(1): 2009/09/25(金) 22:12:28 ID:kaj3Edae0(1)調 AAS
消えてねえよ、ここで更新チェックしとけ

ソフトアンテナ > Windows > WWW > ダウンロード > 巡集
外部リンク[html]:www.softantenna.com
419: 2009/09/25(金) 23:35:57 ID:htTJHAHB0(1)調 AAS
DL数が強制的に1になる前のGetHTMLW(ver 7.11.6かな?)を、ProxomitronでUAを Pockey-GetHTMLから変更してrobot.txtを無視して使うのが一番快適だな。
それでも弾かれるならIrvine系でリンク解析して纏めてDLすればおっけーね。

ところで、今ベクターで公開しているGetHTMLWのDL数を好きなように変えられるバイナリ改変の手法ってあるのかしら。
420: 2009/09/26(土) 00:20:49 ID:vz+4woN2P(1)調 AAS
巡集更新されてるな

ver 1.7.2 (2009/08/30)
* 通信エラーで途中で止まるバグを修正。
* 追加ダウンロードで除外されたファイルもダウンロード可能に。
* 許可URLと除外URLの細かい動作不良を修正。

しかし、作者が株で大損した的なこと書いて
すぐサイト閉鎖したんだっけか
なんかあったのかと当時心配になってたな
421: 2009/09/26(土) 10:23:56 ID:oaSHciNs0(1)調 AAS
>>418
そのリンク先のベクターが一時的に消えてたんだよ。
422: 2009/09/27(日) 13:50:11 ID:ms06DL850(1)調 AAS
ついに巡集のURLフィルタの除外指定が想定どおりになったぞ
以前は許可でパスしてると除外をスルーされていたからな
おかげでため込んだ設定ファイルを一部書き直すことになったが
423
(1): 2009/09/29(火) 22:52:47 ID:jvpQY2ni0(1)調 AAS
巡集素晴らしいソフトだけど、
辿らなかったURLが多いと古いほうからどんどん消えちゃうのがちょっと残念
それからダウンロードURLやURLフィルタに登録できる文字数がもっと増えたり
ダイアログの大きさを拡縮できると俺だけ幸せ
1-
あと 579 レスあります
スレ情報 赤レス抽出 画像レス抽出 歴の未読スレ

ぬこの手 ぬこTOP 0.026s