連番のＨ画像を一気にダウンロードする

1 ：たのも〜 ：2001/01/10(水) 15:02

最近、PGFをコレクション始めたのだが、httpで連番のファイルを一気にダウンロードする
ソフトやスクリプトがあれば教えてけれ。

209 ：1 ：01/10/04 01:41

このところ忙しくて裏本リンクサイト見てなかったら数冊の新刊本がでてた。
一冊一冊取ってくるのは面倒なので、寝る前に一括して取ってくるスクリプトを
考えてます。とりあえずそれぞれの連番のリストファイルはlistとして作っておいて、各裏本用のフォルダーをxxx.dirにおいておくとして以下のようなスクリプ
トをつかってます。とりあえずうまくいってますが、サイトが変わるとrefererの
問題などが考えられると思います。皆様のお知恵を拝借したいと思います。

#!/bin/sh
for i in *.dir
do
cd /home/username/urabon/$i
cat list | xargs wget
done

210 ：名無しさん＠お腹いっぱい。 ：01/10/04 18:04

>>209
フォルダーと言ってしまったな...

211 ：1 ：01/10/05 00:59

>>210
ばればれ? by Kyon2

212 ：名無しさん＠お腹いっぱい。 ：01/10/05 01:21

$ lftp http://www.iy-n.org
lftp> get *.jpg

ってのがまだないな。

213 ：(ﾟoﾟ) ：01/10/05 01:59

このサイトはみなさんのインターネット環境の
スピードを計ってくれます。また、遅いと思う
人は設定を少し変えることによって無料で
スピードを早くすることができます。
お金を出す前に一度試してみては
いかがでしょうか。上がりの計測も可能です。

http://cym10262.omosiro.com/

214 ：名無しさん＠お腹いっぱい。 ：01/10/05 22:28

>>209
>サイトが変わるとrefererの問題などが考えられると思います。

1さんお帰りなさい。

referer等の情報を保持したリストを読み込めるwrapperを書くのがいいのでは。
reget, getright, iria 等のリストが読み込めると嬉しいっす。

215 ：名無しさん＠お腹いっぱい。 ：01/10/05 22:41

>>212
でlftpの威力をはじめて知った。

216 ：名無しさん＠お腹いっぱい。 ：01/10/13 09:46

定期age

217 ：名無しさん＠Ｅｍａｃｓ ：01/10/18 07:14

破損jpegの検索とかできない?

218 ：名無しさん＠お腹いっぱい。 ：01/10/18 07:59

>217
i) ImageMagick
$ identiry broken.jpg
identify: Corrupt JPEG data: premature end of data segment (broken.jpg) [No such file or directory].
broken.jpg JPEG 510x750 DirectClass 8-bit 5120b 0.1u 0:01

ii) libjpeg
$ djpeg broken.jpg >/dev/null
Premature end of JPEG file

nonzero statusで死ぬ分djpegの方が便利かも。

219 ：名無しさん＠Ｅｍａｃｓ ：01/10/19 02:22

>218 サンキュ

for I ;do
for J in `find "$I" -iname \*.jpg` ;do
djpeg "$J" >& /dev/null || wget -xc -T30 -t0 "$J"
done
done

220 ：名無しさん＠お腹いっぱい。 ：01/10/24 01:13

djpeg 使うのなら、jpegtran も便利。それなりに修復してくれる。

for i in *.jpg; do
jpegtran $i > h || mv -v h $i
done

read.cgi ver5.26+ (01/10/21-)