２ちゃん画像落としまくりスクリプト

1 ：1 ：01/10/23 19:39

２ちゃんねるに貼ってある画像リンクを追い、
jpgをかき集めるスクリプトを作ってみました。

http://www.ninnin.net/

※perlとwgetが必要です。
※Windows,Macでは動きません。

2 ：名無しさん＠お腹いっぱい。 ：01/10/23 19:49

windows で perl も wget も動くはずだが。

3 ：1 ：01/10/23 19:50

fork 使ってるからActive perlでは動かないのですよ。
cygwin上なら動くかも（ためしてないけど）

4 ：1 ：01/10/23 19:53

追記：
MacOS Xなら動きますよ
（10.1ならwgetを入れなきゃだめだけど）

5 ：名無しさん＠お腹いっぱい。 ：01/10/23 19:56

ｸﾞﾛ画像ｺﾜｲﾖ(；´д｀)

6 ：1 ：01/10/23 20:03

例えばモー娘板で
一回スクリプトを実行すると
約８００枚の画像が収集できます。

7 ：名無しさん＠お腹いっぱい。 ：01/10/23 21:11

UNIX板的にはどうかと思うがサンクス１

8 ：ソースコード読まずにカキコ ：01/10/23 21:15

Σ（ﾟдﾟｌｌｌ）ｶﾞｰﾝ
アイドル画像板でやったら最初の画像が葉っぱ隊だった
しかも何かループしてて同じ画像だけ取ってるっぽい。
42枚しか収集できなかった。

9 ：UNIX すごい。 ：01/10/23 21:21

MacOS X ですがやってみました。
こんなこともできるんですね。目からウロコです。
中にはとても重たいサーバーがあるので、可能であれば
タイムアウトのパラメータも追加されるとうれしいです。
（３０秒以上反応が無かったらスキップして次、など）
perl スクリプトとか詳しくないのに勝手言っちゃってすいません。

10 ：名無しさん＠お腹いっぱい。 ：01/10/23 21:27

cygwinのperlでも動いた。

ただ $down デフォルトは、せめて2くらいに
しておいた方が良くないかい? もしくは固定とか。
サーバに申し訳なくて5は指定出来ん。

11 ：名無しさん＠お腹いっぱい。 ：01/10/23 21:34

mpegも落としたいが....
醤油みたけど直すのメンドイな

12 ：名無しさん＠お腹いっぱい。 ：01/10/23 22:19

こういうのは自分で書いた方が良さげ。

13 ：1 ：01/10/23 23:39

1です。

>>8
アイドル版ならもっと集まるはず。取得スレ数リミットをもっとあげてみよう。

>>9
wgetのパラメータをいじればできます。現在の設定は２分です。
今後調整します。スクリプトの１５３行目をいじれば変更もできますよ。

>>10
その通りですね。次回のバージョンから少し下げます。

>>11
73,74,84行目の.jpgを.mpgに変更すればＯＫなはずです。

14 ：名無しさん＠お腹いっぱい。 ：01/10/23 23:44

ｶﾞ━━(ﾟДﾟ;)━━ｿ!
よろこびいさんで半角板いったらなんもなかった

15 ：名無しさん＠お腹いっぱい。 ：01/10/23 23:47

おおお、すごいね。ガンガン落とせるよ。でも鯖の負荷がすごそう
なのでsage進行の方が良いかな…。

ところで、これで落とした画像を閲覧するスクリプトとか、
どうやって作るんだろう？　手動でeeで見てるんだけど、再帰的に
.jpgファイルを見るスプリプト？とかありそうなんですが。

16 ：名無しさん＠ＸＥｍａｃｓ ：01/10/24 01:00

やっぱ wget を fork して…ってのはみんな書くのね(笑)
ウチの環境だと wget は 2 個くらい fork するのが一番
効率が良かったかなぁ。
# fork しすぎると timeout して、
# まともに取れなかったりして…


>15
find ./ -name '*.jpg' -exec display \{\} \;
とか?
XEmacs の dired も、よく使いますけど。。。

17 ：名無しさん＠お腹いっぱい。 ：01/10/24 01:08

迷惑画像URLリストとか、どこかにないでしょうか。
フィルタリングしたいですよね。

18 ：名無しさん＠お腹いっぱい。 ：01/10/24 01:26

find ./ -name '*.jpg' |xargs ElectoricEyes

19 ：名無しさん＠お腹いっぱい。 ：01/10/24 01:36

半角板のDATってどこにあるす？ つーか何もないのはおかしいよね。

20 ：名無しさん＠お腹いっぱい。 ：01/10/24 01:41

>>15
スクリプトじゃないけどgqviewとかpicviewとかじゃだめなん？

21 ：124 ：01/10/24 03:03

こんなことができるのは常時接続の人たちですか?

22 ：うひひ ：01/10/24 09:28

>>21
情事切実な人だな。

23 ：名無しさん＠お腹いっぱい。 ：01/10/24 10:38

>>19
半角板だと
$ita = http://okazu.bbspink.com/ascii/
の設定でＯＫなはず

24 ：名無しさん＠お腹いっぱい。 ：01/10/24 13:07

ｈｔｔｐ://とか
ttp://
みたいにあえてコピペ用になってる物も
落とせる？

read.cgi ver5.26+ (01/10/21-)