レス数が900を超えています。1000を超えると表示できなくなるよ。

2ch閉鎖の危機なんだと（Part2.1）

1 ：名無しさん ：2001/08/26(日) 00:42

元スレ
2ch閉鎖の危機なんだと
http://cocoa.2ch.net/test/read.cgi?bbs=unix&key=998695422

その2が無い？ ので続きはこちら。
応援はここじゃなくて専用スレで。

205 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:16

かちゅーしゃを禁止するなら、とりあえずデータフォーマット変えて、
CGIもちょっとだけ変更すべし。

206 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:17

今来たばかりだが、かなり深刻の様だな。
俺らの知識が役に立つのなら何よりだ、俺も手伝うよ。

207 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:17

ところどころ、削除されているね。

208 ：名無し娘。 ◆vP.bOZFQ ：2001/08/26(日) 01:17

dechunkに関する情報が少ないなー。
がんばっておきます。

209 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:17

>>196
かちゅ〜しゃ禁止では10%程度しか転送量は減らないという
実験結果がすでに出ています。
ただしmod_gzipが入るみたいなので今後は専用ツールもgzip対応
すべきでしょう。対応すればdat取得でも転送量は減らせます。

210 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:18

>>197>>201
このスレなんだけど。

211 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:18

>>196
かちゅーしゃとか使ってないからよくわからんのだけど、
アレって、DATを初めから読みにいってるんすか？Rangeヘッダなしで?

…だとすればすげー重いとは思うのですが、流石にそれはない気が…

212 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:18

>>204
それはかちゅ〜しゃのFAQだからいまさらこんなとこで言うな。
これ以上ここで絡まれたら嫌だから教えとくと、一回ログを削除してから再取得するの。

213 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:18

>>204
されてます。削除して取得しなおしてください。

214 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:18

まとめきぼーん
つか、とにかく把握している問題をだれか書いて
そのとき本文は
[現在の問題]
1. foo
2. bar
みたいな形式だとありがたい。

215 ：　 ：2001/08/26(日) 01:18

Apacheでの方式はやはり困難でした。
index.html.gzで転送してDechunkの対策をしてください。
もしくはLast-Modifiedにて。
BlackJumboDogのトレース表示しても余り意味ないよーな...。

216 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:18

>>167
こういった場合の緊急的な場合は画像OFFが一番早くて確実です。
../ba.gifってのをmvするだけでもかなり効果的です。

217 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:18

有名鯖がはじかれると問題が出るね。
ま、荒らしは去ったからよかったよかった。

218 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:19

>>196のデータ、264KBもある。
tar.bz2で圧縮すると、45.2KBになった。

219 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:19

かちゅ〜しゃがRange指定してるとしたらブラウザの方が重いだろ
HTMLの量も多いし

220 ：Zzz ：2001/08/26(日) 01:19

datも部分取得可能なCGI用意しておいて専用ツールはそれ
利用するようにさせれば良いんじゃないの？

221 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:19

>>211
ちゃんとRangeで差分取得しています。>>196が知ったかなだけです。

222 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:19

あの・・・あ・・私・・が・・・頑張ってください！

223 ：_ ：2001/08/26(日) 01:19

>>211
レジュームがきいてるみたい　　途中から取得してるみたい

224 ：♯6411 ：2001/08/26(日) 01:20

>>208 とりあえず >>151 の対処療法で
今晩はしのげるんではないかと。
ぜひ試してみて。

225 ：メリー（315） ：2001/08/26(日) 01:20

皆さん頑張って下さい。
自分は何もできん。

226 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:20

ソース見たけど、無駄なprintfが多いな…。

printf("\
２ちゃんねるだいすき<br>\
おれもおうえんするよ<br>\
");

な感じで書けば、わずかだけど早くなんない？

227 ： ：2001/08/26(日) 01:20

Rangeで取得しようが全部読むと転送量は総合的に増える。

228 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:20

>>226
プログラム板逝け。

229 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:20

>>218
なんでtarなのよ？

230 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:20

[問題]
1. かちゅーしゃ等の専用ツールからの読み出し
2. 画像の送信を取りやめるか否か

231 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:20

>227　始めの取得はね。

232 ：名無しさん ：2001/08/26(日) 01:21

~~~ヾ(〃^∇^)ｏ ｷｬｰ!ﾌｧｲﾄｫｰ!!

233 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:21

あぼーんされると全レス再取得になるからね・・・かちゅ〜しゃ。

>>209の実験結果とは一体どんな実験だったのか、かなり気になる。

234 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:21

>>227
>Rangeで取得しようが全部読むと

知識がないなら邪魔しないでください。
それともあからさまにAA荒らししてるとすぐ規制されるから
新手の邪魔ですか?

235 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:22

>>230
かちゅーしゃ対応済み
他ツールの対応状況とか判る？

236 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:22

またーり逝くべし

237 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:22

HTTPヘッダ見るには、パケットキャプチャするのが確実。
実際にブラウザが何を送って、何を受け取ってるかわかるよ。

238 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:22

>>233
datをアクセス不可にしてどれくらい転送量が変わったか
夜勤さんが調べたものです。

239 ：名無し娘。 ◆vP.bOZFQ ：2001/08/26(日) 01:23

>>224
理解しています。根本的解決方法を模索中です。
単純に、chunkedをはかないようにすればいいのですが、鯖は弄れないんだよなぁ。

240 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:23

>>221
やっぱそうですか、どうも.

>>209
mod_gzip入るんですか?
ていうか実際入ってしまえば、それだけでかなり解決されてしまう気がするのですが。

というわけで、
[問題]
3.mod_gzip は入るのか否か

241 ：238 ：2001/08/26(日) 01:23

238

242 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:23

>>226 ソフト屋ならだれしもそう思うだろうけど、
とりあえず、転送量からみの問題から片付けた方がいいよ。
つーか、オレも出遅れちゃったから、
ぼーっと、このスレ見てるだけなんだけど。

243 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:23

自分以外の全ての人は自分より技術があると思って、またーりね。
たまーに間違うこともあるけど、人間関係壊さず優しく指摘。

244 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:23

>>195のいいんちょさん
メアド間違ってませんかー・・・？

245 ：_ ：2001/08/26(日) 01:23

>>237
どのように調べればいいですか？

246 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:23

>>235
まだgzipに対応したツールはないはず
2chブラウザーを除くほとんどのツールがdat直読みにはすでに対応
してるけどそれと混同してない?

247 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:24

かちゅーしゃ等のツール郡はいったん切り捨ても良いのでは？
後から再開発は可能な訳だし、２Ｃｈ本体を救う方が先だろう？

248 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:24

>>226
CGIの重さは今は問題ではない。
htmlの転送量を減らすこと。これ以外の
改良には手をつけないほうがいい

249 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:24

Windowsでパケット読むには、
ライブラリのWinPcapとWindows版EtherealがあればOK！

http://netgroup-serv.polito.it/winpcap/
http://www.ethereal.com/download.html#binaries

Follow TCP Stream機能が便利

250 ：248 ：2001/08/26(日) 01:24

テスト

251 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:24

とりあえず今は現状の対策に専念して、後で情報や変更点をまとめて
各ツール関連スレに報告したうえで個別対応してもらうというのは？

252 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:24

>>237
etherealで見ましょう

253 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:25

>>247
同意。gzip対応でないツールは切り捨ててもいいかも。

254 ：名無し募集中。。。 ：2001/08/26(日) 01:25

実際の所、かちゅもブラウズにはＩＥをつかっているので、
datの読み出し時にも圧縮できるようにならないのかな。
かちゅが使えなくなるとちょっと大変。

255 ：マァヴ＠削除管理委員長 ★ ：2001/08/26(日) 01:25

あら？(^_^;)メル鯖死んでるのかな？
sakujy@mailmagic.org
これでだめなら
mirv@capella.freemail.ne.jp
こっちでどうぞです。

256 ：名無しさん＠揚げ足 ：2001/08/26(日) 01:25

あぼーん用ファイルがあれば専用ツールは対応できるのでは？
例えば*.abronとかにあぼーん番号を格納するようにとか

257 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:25

>>230
1.
かちゅーしゃなどの独自ブラウザに関しては、まだそんなに神経質になる必要はないと思う。いずれは対処しないといけないと思うけれど。
ネット雑誌等で2chが紹介された影響でアクセスが急増加しているようだから、index2.htmlの部分をどう削るかが主眼だと思う。

2.
画像は無いほうが良いが、あってもかなり圧縮したほうが良い。特に看板系は圧縮があまりされてないものも見かける。１度きりでキャッシュされるとは言え、ここをいじると効果は高いと思う。

258 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:26

えー、ブラウザの通信内容見るだけだったら
http://hidemaru.xaxon.co.jp/software/ydm.html + http://hidemaru.xaxon.co.jp/software/inetspy.html
が、一番簡単な気がします。内部的にはプロクシとして動作してます。

参考まで。

259 ：gzip問題について ：2001/08/26(日) 01:26

現状
read.cgiを無理矢理gzip化
問題
かちゅーしゃ等の専用ツールには意味が無い
index2.html なども圧縮されていない

今後の展望
かちゅーしゃ等の専用ツールに対応してもらう。
index.html.gzに改造

はっきりして欲しいこと
mod_gzip は導入されるのか？

260 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:26

>>254
かちゅは通信系は独自コンポ。

261 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:26

とにかくHTTPの通信量を減らすことが重要で、
サーバの負荷は緊急の問題ではない。
サーバに負荷をかけてでも通信量を減らすことが今は重要。
この認識は正しい？

262 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:26

>>237
network sniffer Vigil
http://www.vector.co.jp/soft/win95/net/se191515.html

使える？？

263 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:27

1.index2.htmlの圧縮がしたい
2.index2.htmlについては、夜勤さんの担当ではない(トオルさん？)

264 ：　 ：2001/08/26(日) 01:27

mod_gzipではなくmod_negotiation が入っているのでは？
ホットゾヌは独自(Indy)でした。
Apache を変更されてはいかがでしょうか？
Last-Modify だけでも一応効果がありそうなので試みています。

っつーか普段会社でも忙しいのに、なぜ一円にもならない
ボランティアをしているのでしょうか...(;´Д`)

私は疲れた or 気が滅入ったら落ちます。

265 ：テスト ：2001/08/26(日) 01:27

まったり

266 ：Perler ◆GSi39OA6 ：2001/08/26(日) 01:27

出来た気がする＞Last-ModifiedとIf-Modified-Since対応版

今からアップロードします

267 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:27

>>261
正しいと思われ。
gzip対応でも大して負荷は増えていないらしいし。

268 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:27

専用ツールの話はこっちも参考になるかも

http://64.71.134.227/computer/479/monazilla.html

269 ：メリー（新規） ：2001/08/26(日) 01:27

>>225
メリー（315）さん はけん(ﾟДﾟ)

270 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:28

Ｃ中級者程度の俺には何もできねー。
プロの人たちはすげーよ。
ＵＮＩＸって時点ですげー。

271 ：... ：2001/08/26(日) 01:28

【6:2】　★　　PC初心者板で2chのプログラムを開発中　　★
1 名前： 投稿日：2001/08/26(日) 01:17
多段嵐王　あひゃ　ヒロヒトが送信データー圧縮して送るプログラムを
開発中だそうです。
荒らしてる人がいるので　やめてください。

272 ：226 ：2001/08/26(日) 01:28

>>248
gzip対応したら、結構マシンパワー食うよ。
負荷かかりすぎて鯖落ち経験してるから。

273 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:28

>>264　ＡＬＬ
作業の合間に、応援ページもみてまったりしてください。

http://teri.2ch.net/test/read.cgi?bbs=accuse&key=998750638&ls=100

274 ：369 ◆3XTuRnAc ：2001/08/26(日) 01:28

了解＞Perlerさん

275 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:29

ここのスレ？　転送量を16分の一にして閉鎖を免れさせたっていうのは。
すごいな、さすがUNIX使いはレベルが高いのか。

276 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:29

1.mod_gzipは組み込めない
2.サーバ技術者さんに確認中だが、Apacheはいじれない

mod_gzipの組み込みをデフォルトにしてくれればＯＫなんですけどねぇ〜

277 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:29

>>267
gzipで逆に重くなるのは、圧縮の掛かりにくいモノを無理矢理圧縮しようとしたときぐらいかと。
鯖の負荷はあまり変わりません。うちは実際それで運用中です。

278 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:29

重箱の隅をつつく的な意見で申し訳ないんだけど
メールアドレスが「sage」の場合はいちいち「mailto:sage」
書き込むのは無駄じゃないのか？
書き込み側のスクリプトをチョチョイといじってやれば
１リロード辺り数百バイトぐらいは節約できると思うYO!

279 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:29

>>238
datをアクセス不可にすれば、2ch閲覧ツールのユーザも
CGI経由での情報取得に移行して、転送量が少し下がる程度に終わると思う。
適切な実験か、という点では？だね。

280 ： ◆7sFB369A ：2001/08/26(日) 01:30

とりあえず、緊急対策で全部の画像を外しておくと良いと思う
今のうちに最新レス100も50あたりに減らす・・・かなり効果あると思う
とりあえず、Unixは使えない馬鹿だけど、使えるとおもう情報

281 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:30

かっこ悪いけど<br>を<p>にすると1byte減るよ(^^;

282 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:31

>>281
可愛いｗ

283 ：118 ：2001/08/26(日) 01:31

>>262 うーん、俺もできたと思ったとこなのに..
惜しい。
# つーか BSDのlibraryに依存してるんだよなあ。

284 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:31

>>272
導入前にある程度心配されていたが
いまのところCPU不足の問題は起きていないみたいだね。
Pen3Dualの威力は尋常じゃないな。

285 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:31

>>278
そういう視点で考えるのなら、「名前」とか「投稿日」の見出しも要らないと思う

286 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:31

スペースとかコメントとかも全部削ればもう少し減るよ…

287 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:31

>>272
すでに対応しています。
夜勤さんによれば負荷も問題ない程度だそうです。
まず過去ログ見ていただけませんか?

288 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:32

＞802　名前：ＤｏｌＢａｃｋｙ
＞
＞２時間後にMOD_GZIPが導入されるかも。
＞それを前提とするならREAD.CGIはLAST-MODIFIED対応が要点となります。。。

でま？

289 ：名無し娘。 ◆vP.bOZFQ ：2001/08/26(日) 01:32

なーんでHTTP/1.0クライアントでchunk問題が起きるのか理解できない。。。
ひぃ。

290 ：名無しさん ：2001/08/26(日) 01:32

結局どうにかなりそうなの？

291 ：　 ：2001/08/26(日) 01:32

細かいチューニングについてはプログラム板で検討されていますのでそちらでお願いします。

292 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:32

>>279
mod_gzip入ればdatも圧縮掛かりますよね。
それ以上に、ツール側でRangeヘッダをうまく使えるようにならないかなぁ。

>>278
圧縮関連入れば、同じモノの繰り返しは符号化で殆ど小さくなります。

293 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:32

ProxomitronのHTTP Message Logってので見られるのは違うのかな。

294 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:32

htmlのどれそれ削ろうって話はとりあえず別スレで…。
がいしゅつだし、効果は微々たるものだし。

295 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:33

>>282
imodeコンテンツでよくやる手だったりする。
toolでリターンコードも削除するといい感じ。

296 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:33

応援に来ました！
http://yasai.2ch.net/test/read.cgi?bbs=arc&key=998566942&ls=50

297 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:33

gzipの圧縮は、そんなに重くないとおもわれ（オプションにもよるが）、
sshなども通信時に圧縮しているが、scpがrcpより速くなるし。

298 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:33

このスレの話題はread.cgiの改良で
index2.htmlの軽量化ではないです、、、

299 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:33

HTML最適化っていう技能は使えませんか？

300 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:33

実験したpiza2のスペックはこうだけど、
http://www.maido3.com/server/usagi/news.html

他のサーバのスペックがわからんと、CPU負荷がどれぐらいネックになるのかわからんなああ…。

# 寝る、っつうか仕事する。

301 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:33

279いやそれでは根本的な解決にはならないとおもうよ。やっぱりｃgi
の負荷自体を考えないと

302 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:33

投稿日は必要だろうけれど、「曜日」はいらないような
気がする。

303 ：２ちゃん ：2001/08/26(日) 01:33

後藤真紀かわいいね〜〜

304 ：名無しさん＠お腹いっぱい。 ：2001/08/26(日) 01:33

>>292
だからRangeヘッダはすでに使ってるって。
誰が変なデマ流したのか知らないけど。

read.cgi ver5.26+ (01/10/21-)