【２ちゃんねるビューア】　巡回機能の巻。Part3

■スレッドリストへ戻る■ 全部 1- 101- 201- 301- 401- 501- 601- 701- 801- 901- 1001- 最新50

558 ：Dream ★ ：02/03/25 22:54 ID:???: >>555
＞あと、mod_gzipのテンポラリファイル作成がかなりシステムコール食ってそうなんで、
＞スレッドのhtmlデータのgzip圧縮を、mod_gzipからread,cgiで圧縮するようにすれば、少しは軽くなりそう

このへんって、具体的にローカルかなんかのベンチ結果って、出せるものなのですか？
Apacheのmod系って、重いとは聞いていますが、どうなんですか？
559 ：ななむす ◆nnmm.69A ：02/03/25 23:02 ID:???: gz圧縮、、、
「ファイル作るときにzlibでまとめて圧縮する！」がおそらく最適で、で、
その最適を目指さないと逝けない状況な気がするん。
560 ：想像力なしさん ：02/03/25 23:02 ID:???: >>558
べつにapacheのmodが一般的に重いわけではない
mod_gzipは、圧縮にcpu使うし、テンポラリファイル作成するため、かなり重いシステムコールを
使うから当然重い
圧縮に、ユーザーモードでcpu使うのは仕方がないが、全体でシステムコールを少なくすれば、
ある程度軽くなるはず

具体的なベンチはないけど、mod_gzipくみこんだapacheに、apachebencheで、大量アクセスを
かけてみたら、システムコールが多く、カーネル時間消費が多かったから
561 ：名無しさん＠お腹いっぱい。 ：02/03/25 23:04 ID:???: httpd.conf の mod_gzip_maximum_inmem_size の値、どうなってるのかな?
ファイルサイズがその値を越えると、mod_gzip はテンポラリファイルを
使うようになるから、あまりに小さかったら増やしてみては?
ファイルアクセスがかなり減る。

って、httpd.conf はいじれないんだっけ。ごめん。
562 ：名無しさん＠お腹いっぱい。 ：02/03/25 23:07 ID:???: >って、httpd.conf はいじれないんだっけ。ごめん。

he.net の人にメールで交渉..というパターンだっけか
今の設定だけでも知りたいﾓﾅ
563 ：名無しさん＠お腹いっぱい。 ：02/03/25 23:11 ID:???: 　　　　　html　bbs.cgi　　　　.dat　.dat.gz　　cgi　　　txt　　　all
corn.2ch.net (tv.2ch.net saki.2ch.net)
ch2corn_50463__15761__101003___714____79604__15974__263519
ch2tv___259582__24102__231555___276__420190__40588__976293
saki_____136826______43_______731__3198___10688_____481__151967
　　　　　446871　39906　333289　4188　510482　57043　1391779
-----
ebi.2ch.net (music.2ch.net)
ch2music__174125__18252__93073___244__306574__22862__615130
ch2ebi_______56920____4301__26579__2735___65738___6648__162921
　　　　　　　231045　22553　119652　2979　372312　29510　778051
-----
salad.2ch.net (comic.2ch.net)
ch2comic　128533　19565　189210　 586　236145　30555　604594
ch2salad　　 62818　 2889　 48805　2884　 33204　 5559　156159
　　　　　　 191351　22454　238015　3470　269349　36114　760753
-----
natto.2ch.net
ch2natto　255028　47208　196006　1855　355940　33491　889528
-----
pc.2ch.net
ch2pc　　 161109　28413　441156　1465　325271　91938　1049352
564 ：563 ：02/03/25 23:14 ID:???: 確かvirtualhostの設定が >>563のようになっていたので集計してみた。
鯖のスペックの違いとかありましたっけ？
いずれにせよpc鯖はリクエストの割に軽そう。
565 ：夜勤 ★ ：02/03/25 23:18 ID:???: mod_gzip_minimum_file_size 300
mod_gzip_maximum_file_size 0
mod_gzip_maximum_inmem_size 100000

UpTime(game) = 6:09am up 10 days, 20:40, 0 users, load average: 12.30, 12.75, 12.86
566 ：名無しさん＠お腹いっぱい。 ：02/03/25 23:21 ID:???: やっぱ、mod_readcgi作成が一番利にかなっているような。
・プロセスが減る
・作りによっては、祭りスレの.datをキャッシュ出来る
が、政治的な理由で(he.netとの絡みも含めて)難しいか。
567 ：名無しさん＠お腹いっぱい。 ：02/03/25 23:31 ID:???: >>565 夜勤さんありがとう。
100000byteか。この値で十分だと思う。

混雑時間帯には、read.cgi は最高100レスまでしか返さない。
100レスで約100kb越えるスレってAA系の板でもあまり多くない。
568 ：夜勤 ★ ：02/03/25 23:34 ID:???: game での実験は　こんなとこかな?
どうでしょか?

UpTime(game) = 6:32am up 10 days, 21:03, 0 users, load average: 15.18, 16.13, 15.36
569 ：想像力なしさん ：02/03/25 23:39 ID:???: >>561
じつは、mod_gzipのい設定でインメモリで処理するようにしても、
テンポラリファイルが作成される

インメモリで処理する場合、圧縮前のデータがテンポラリファイルに保存され、
圧縮後のデータにはテンポラリファイルは使われない

インメモリで処理しない場合、圧縮前のデータも圧縮後のデータも
テンポラリファイルが使われる

むかしのバージョンだと、ちょっと動作が違うけど、いまのバージョンでは
上の説明で多分あってるはず
570 ：● ◆fcGQQrQE ：02/03/25 23:40 ID:???: bbspinkはいじりたくないんでしたっけ？
vipなんか実験してみると変わりそうな気が？
571 ：名無しさん＠お腹いっぱい。 ：02/03/25 23:47 ID:???: >>569
マジ? ちょっと mod_gzip.c 読んでくる。
572 ：名無しさん＠お腹いっぱい。 ：02/03/25 23:49 ID:???: 566さんのおっしゃる通りmod_readcgiなんか作ったら一番効果あるだろうね。
mod_perlだったら入れてくれるというなら、CでPerlのモジュール書けば
ほぼ同じ効果が得られそうだし、bbs.cgiにも効果あるので一挙両得なんだが。
573 ：名無しさん＠お腹いっぱい。 ：02/03/26 00:00 ID:???: アパッチのモジュールを作る云々という話は
かなーり昔に却下されたぞ。
574 ：名無しさん＠お腹いっぱい。 ：02/03/26 00:00 ID:???: game鯖負荷グラフUP
ttp://mappy.mobileboat.net/~seek/up/index.cgi
No.835
575 ：AJA6H/Ws ◆MPnX7dHA ：02/03/26 00:01 ID:???: >>573
いや、今はトオルも動いてるから違うんじゃないの？

今、過去ログ読んでおります・・・・　<進行中>
576 ：ななむす ◆nnmm.69A ：02/03/26 00:01 ID:???: >>573
うんうん。。。でもでもー(笑
577 ：名有りさん＠お腹へった ◆fSunOs.U ：02/03/26 00:07 ID:???: 一応 >>483で言ってたﾔｼ
http://pc.2ch.net/test/read.cgi/software/1008169646/43-44n

mod_*を作るのなら......どうせならApache2.xで(w
578 ：夜勤 ★ ：02/03/26 00:08 ID:???: >>574
どうも　ありがとうございます。
579 ：Dream ★ ：02/03/26 00:14 ID:???: >>577
各処理に任せず一ヶ所に処理を集中させたとき、サーバがこけたとして、
こけたものを救済するのはどうやるですか？
580 ：ボヤッキー ：02/03/26 00:18 ID:???: >574
お疲れ様です。
http://www6.ocn.ne.jp/~boyakkie/average.html
581 ：Dream ★ ：02/03/26 00:20 ID:???: gameサーバのグラフ的には、なにか一気に沈静化したような雰囲気がありますね。
効果があったのでしょうか？
582 ：夜勤 ★ ：02/03/26 00:21 ID:???: 私は　とっても効果があったと理解しています。
583 ：名有りさん＠お腹へった ◆fSunOs.U ：02/03/26 00:22 ID:???: >>579 うーん，まぁサーバがコケた時云々ということになると，そもそも
普通のやり方でディスクに書き出したとしても，明示的にfsync()とかしなきゃとか
いう話になってしまうと思うのですが......
584 ：名無しさん＠お腹いっぱい。 ：02/03/26 00:24 ID:???: アクセスが最も集中する時間帯にもかかわらず、負荷は導入前より
低減しているのですから、絶大な効果ありという理解でよろしいのでは？
585 ：● ◆fcGQQrQE ：02/03/26 00:26 ID:???: http://mappy.mobileboat.net/~seek/logview.cgi?srv=game.2ch.net

それでも時々負荷がかかってる？
見られない→リロード繰り返しってことなのかな？
586 ：名無しさん＠お腹いっぱい。 ：02/03/26 00:26 ID:???: このグラフって１分の方で取ってるの？変動がやけに大きいような．．．
587 ：AJA6H/Ws ◆MPnX7dHA ：02/03/26 00:27 ID:???: >>582
よかったですね。♪　おめでと！

*･゜ﾟ･*:.｡. .｡.:*･゜ﾟ･*:.｡. .｡.:*･゜
　　　(･∀･)ｼｬﾝﾃｨ♪
*･゜ﾟ･*:.｡. .｡.:*･゜ﾟ･*:.｡. .｡.:*･゜
588 ：名無しさん＠お腹いっぱい。 ：02/03/26 00:27 ID:???: >>585
http://mappy.mobileboat.net/~seek/logview.cgi?srv=vip.bbspink.com
こちらも
589 ：夜勤 ★ ：02/03/26 00:28 ID:???: 絶大な効果があった　100 -> 50 になった
でも　目標は　1 以下だったりする　、こんなとこ?
590 ：574 ：02/03/26 00:30 ID:???: >586
グラフでは1分、5分、15分の平均値を使っています。
分けたほうがよかったですかねぇ？
591 ：● ◆fcGQQrQE ：02/03/26 00:42 ID:???: ＞588
　？　半角逝った事ないので状況分からないんですが。
　＞570 の書き込みのこと？
592 ：名無しさん＠お腹いっぱい。 ：02/03/26 00:49 ID:???: >>591
いやvipも変更した筈だけどまだ負荷がかかっているみたいということで．．．
593 ：夜勤 ★ ：02/03/26 00:51 ID:???: vip はもっと　供給が需要に追いつかないんでしょうね
vip スレ保持数 250 にしてみました。
594 ：夜勤 ★ ：02/03/26 00:54 ID:???: あらっ　全然効果なかったです。
前までは、スレ保持数を減らすと軽くなったんですけどねー
UpTime(vip) = 7:54am up 24 days, 10:00, 0 users, load average: 169.48, 145.90, 141.86
595 ：● ◆fcGQQrQE ：02/03/26 01:00 ID:???: ＞592
　ありゃ？vip変更してたんですか。それは失礼。見落としてました。
　その割りに悲鳴が聞こえないのは既にかちゅユーザーは対応済なのか
vipユーザーは主にブラウザ使ってるのか？

　vipユーザーだけツール使用比率違うなんてことは…ないよなぁ？
596 ：名無しさん＠お腹いっぱい。 ：02/03/26 01:00 ID:???: ２ちゃんは性欲には勝てないのか～。
597 ：● ◆fcGQQrQE ：02/03/26 01:02 ID:???: 見落としって言うか忘れてるよ私……寝よ。
598 ：名無しさん＠お腹いっぱい。 ：02/03/26 01:03 ID:???: >>595
見落としもなにも・・・・初回限定版でっせ＞vip
599 ：ﾓｻﾞｲｸ☆ ：02/03/26 01:07 ID:???: ここにもﾎﾟﾁｯﾄﾅ

★ bbs.cgi軽量化開発コンペ ★
http://qb.2ch.net/test/read.cgi/qbtr/1017071166/l50

682 ：トオル：02/03/26 00:19 ID:a2u5HD06
「先に作ったもの勝ち」じゃなくて、
「どれだけ軽量化できるか勝負」ですよん。。。
674 ：トオル：02/03/26 00:16 ID:a2u5HD06
なお、これに参加する、かつ、
プロバメールである程度身元を表明できるというかたには、
表に出すより少し詳細なものをメールでお送りしたいと思います。
600 ：AJA6H/Ws ◆MPnX7dHA ：02/03/26 01:13 ID:???: >>593
良スレがかなりdat落ちでヤヴァイんですけど > Vip
601 ：名無しさん＠お腹いっぱい。 ：02/03/26 01:15 ID:???: 他の鯖も供給が需要に追いつかない気味もあるがね。
602 ：名無しさん＠お腹いっぱい。 ：02/03/26 01:17 ID:???: kageが簡単に苦楽できるんですが。
603 ：AJA6H/Ws ◆MPnX7dHA ：02/03/26 01:18 ID:???: 半角系は良スレがsage進行でやってることが多いから
早めに戻してね。
２５０はなんぼなんでも少なすぎ・・・
604 ：夜勤 ★ ：02/03/26 01:18 ID:???: ですなー
どうしたもんだか、
605 ：名無しさん＠お腹いっぱい。 ：02/03/26 01:20 ID:???: newsは250でも問題無さそうな気がしないでもない。
606 ：AJA6H/Ws ◆MPnX7dHA ：02/03/26 01:20 ID:???: >>604
で、消えたスレッドはもとに戻るわけ？
607 ：名無しさん＠お腹いっぱい。 ：02/03/26 01:25 ID:???: datに逝ってしまえば元には戻らない。。。
608 ：AJA6H/Ws ◆MPnX7dHA ：02/03/26 01:26 ID:???: おいおい・・・
いくらなんでも安易に変更しすぎ何じゃないの？（´Д｀;）
609 ：名無しさん＠お腹いっぱい。 ：02/03/26 01:27 ID:???: (ﾟεﾟ)ｷﾆｼﾅｲ!!
610 ：● ◆fcGQQrQE ：02/03/26 01:28 ID:???: でも軽くなって…る？
単に生きてたスレが消えちゃっただけか？
http://mappy.mobileboat.net/~seek/logview.cgi?srv=vip.bbspink.com
611 ：名無しさん＠お腹いっぱい。 ：02/03/26 01:28 ID:???: 圧縮によってdat落ちするのは書き込みが古い順だから、仕方ないと思われ。
612 ：名無しさん＠お腹いっぱい。 ：02/03/26 01:29 ID:???: AJA6H/Ws ◆MPnX7dHAがエンドユーザの立場でぶー垂れはじめました。
613 ：名無しさん＠お腹いっぱい。 ：02/03/26 01:29 ID:???: 1000→700は、やりすぎだろ。
614 ：名無しさん＠お腹いっぱい。 ：02/03/26 01:29 ID:???: 現在進行形のスレまで消さんといて～。最終書き込み４時間越えでDAT落ちはキツいわ。
615 ：名無しさん＠お腹いっぱい。 ：02/03/26 01:30 ID:???: 一応、その手のスレが批判要望板にある。

圧縮要望スレッド
http://kaba.2ch.net/test/read.cgi/accuse/1016705143/l50
616 ：名無しさん＠お腹いっぱい。 ：02/03/26 01:34 ID:???: 半角二次元板、自治スレも落ちたみたいね
たしか23時の時点で450近くスレがあったから200スレ落ちたのか・・・
617 ：AJA6H/Ws ◆MPnX7dHA ：02/03/26 01:35 ID:???: >>612
だってこれはいくらなんでも暴走・・・・
618 ：名無しさん＠お腹いっぱい。 ：02/03/26 01:37 ID:???: >>617
>>615で思う存分、主張せよ。
619 ：● ◆fcGQQrQE ：02/03/26 01:40 ID:???: ＞617
　鯖負荷で落ちるのと、延命策とどちらを選ぶかのバーターだし。
　今はこれが精一杯と考えるしか。
620 ：名無しさん＠お腹いっぱい。 ：02/03/26 01:42 ID:???: 半角２次元圧縮し過ぎや。
621 ：名無しさん＠お腹いっぱい。 ：02/03/26 01:44 ID:???: すげームカツイた。
622 ：名無しさん＠お腹いっぱい。 ：02/03/26 01:48 ID:???: (・∀・)ﾆﾔﾆﾔ
623 ：名無しさん＠お腹いっぱい。 ：02/03/26 01:49 ID:???: 夜勤さんも苦労するわ．．．ヽ(´Д`;)ﾉ
624 ：名無しさん＠お腹いっぱい。 ：02/03/26 01:50 ID:uCnrXIvG: いくつもの良スレが削除されてしまったことに対して憤慨してもイイですか
625 ：名無しさん＠お腹いっぱい。 ：02/03/26 01:52 ID:???: >>624
俺も半二住人なので常駐スレが落ちて泣きそうだけど、
憤慨しても意味ないからやめれ
626 ：名無しさん＠お腹いっぱい。 ：02/03/26 01:53 ID:???: 覆水盆に還らず（合掌）
627 ：624 ：02/03/26 01:54 ID:???: >>625
切ねぇっすよ…。殆どの良スレはあの時間帯殆ど下にいるってのに…
628 ：名無しさん＠お腹いっぱい。 ：02/03/26 01:54 ID:???: >>624
同じく虹住人。
悔しいけど、仕方ねえんだ。
糞スレもある程度消えた。これからまた良スレを作ってけばいい事よ。
クヨクヨするな、相棒！
629 ：名無しさん＠お腹いっぱい。 ：02/03/26 02:00 ID:???: http://vip.bbspink.com/test/read.cgi/ascii2d/1017074941/l50
虹板自治スレ。
630 ：AJA6H/Ws ◆MPnX7dHA ：02/03/26 02:08 ID:???: >>629
大変混乱しとるが・・・
631 ：624 ：02/03/26 02:11 ID:???: >>628
クヨクヨしても仕方ないんですよね…でもやりきれないです。
荒らしとか宣伝とかこまめに削除依頼だして来た自分のスレが消えてたのが
一番のショックです…。

この騒ぎに便乗してまたクソスレ立ててる奴がいるのも切ないです…。
632 ：AJA6H/Ws ◆MPnX7dHA ：02/03/26 02:14 ID:???: （･∀･）ｽｯﾄﾞﾚ!がなくなって氏にそうだよ・・・・
あしたからどうやって献立考えよう・・・・
633 ：ﾓｻﾞｲｸ☆ ：02/03/26 02:15 ID:???: スレの趣旨からはずれとるぞ
634 ：名無しさん＠お腹いっぱい。 ：02/03/26 02:15 ID:???: 愚痴スレはここですか？違いますよね？
635 ：名無しさん＠お腹いっぱい。 ：02/03/26 02:15 ID:???: >>629
ひどいなぁ．．．
636 ：625 ：02/03/26 02:15 ID:???: >>632
http://vip.bbspink.com/test/read.cgi/ascii2d/1017073843/

この件は終了。
圧縮の件はこちらで

圧縮要望スレッド
http://kaba.2ch.net/test/read.cgi/accuse/1016705143/l50
637 ：ﾓｻﾞｲｸ☆ ：02/03/26 02:43 ID:???: >599移動しますた。
★ bbs.cgi軽量化開発コンペ ★
http://qb.2ch.net/test/read.cgi/jikken/1017071166/l50
638 ：名無しさん＠お腹いっぱい。 ：02/03/26 06:37 ID:???: ところでgzipはいっぺんに複数ファイル圧縮できるという点に
なぜ誰一人として突っ込みませんか。

$ gzip index.html subback.html subject.txt

これだとオリジナルが消えちゃうから少し工夫が必要だけど。
639 ：名無しさん＠お腹いっぱい。 ：02/03/26 10:07 ID:???: >638
　gzipて、permissionとowner/group保持できないんでない?
640 ：名無しさん＠お腹いっぱい。 ：02/03/26 10:15 ID:???: 板のdat落ちって最終更新順だから、スレが下にあるかどうかは（直接）関係ないのにな・・・。

書き込みがないから落ちたんであって、順位が下だから落ちるんじゃないんだよ。

＞sage進行のスレにつらいとか言ってた奴。
641 ：名無しさん＠お腹いっぱい。 ：02/03/26 10:15 ID:???: >>640　誤爆
642 ：名無しさん＠お腹いっぱい。 ：02/03/26 10:28 ID:???: >639 gzip.cを読め。
643 ：一　五明 ◆DKXvv9Lw ：02/03/26 10:46 ID:7r1LDwf0: Unixのファイルシステムはよく知らないけど、実況鯖だけでも
RAMディスクで運営するようなわけにはいかないの？
1Gで100Kのスレが1万入るが…
644 ：名無しさん＠お腹いっぱい。 ：02/03/26 11:02 ID:???: >>639
それはstdoutにリダイレクトした場合(現行)でも同じだと思うが
645 ：名無しさん＠お腹いっぱい。 ：02/03/26 11:23 ID:???: >>643　誰がその分の金だすんじゃい？
646 ：281 ：02/03/26 13:35 ID:???: >>282
ということは、更新していれば問題ないということですね？よかった。
いろいろ迷惑をかけてすいませんでした。
647 ：名無しさん＠お腹いっぱい。 ：02/03/26 13:36 ID:???: >>646
誤爆です。すいませんでした。
648 ：名無しさん＠お腹いっぱい。 ：02/03/26 15:53 ID:???: あげ。
649 ：Dream ★ ：02/03/26 17:26 ID:???: おはようございます。
今日は夜勤さん、テスト鯖拡大するのでしょうか？
650 ：Dream ★ ：02/03/26 17:29 ID:???: >>640
一応その件は板違い、というか・・・・
651 ：Dream ★ ：02/03/26 17:30 ID:???: >>637
参加しますた。
652 ：Dream ★ ：02/03/26 17:38 ID:???: ２ちゃんねるビューアの技術的な負荷軽減策を話しています。

【２ちゃんねるビューア】　巡回機能の巻。Part3
http://pc.2ch.net/test/read.cgi/software/1016905060/l50

bbs.cgiまわりの件はこちらです

★ bbs.cgi軽量化開発コンペ ★
http://qb.2ch.net/test/read.cgi/jikken/1017071166/l50

圧縮の件はこちらで

圧縮要望スレッド
http://kaba.2ch.net/test/read.cgi/accuse/1016705143/l50

運営関係の話はこちらです。

「monazillaツールと課金及び転送量・鯖負荷問題を考えるスレ」
http://kaba.2ch.net/test/read.cgi/accuse/1016974669/l50

こんなスレッドもあります。

monazilla Part 3
http://pc.2ch.net/test/read.cgi/tech/1012544484/l50
dat->html化自動処理プログラムをつくるスレ
http://pc.2ch.net/test/read.cgi/tech/1012310594/l50
read.cgi改良スレッド 3
http://pc.2ch.net/test/read.cgi/tech/1002820903/l50
653 ：夜勤 ★ ：02/03/26 17:38 ID:???: >>649
予定なし～
ちょっと、お出かけしようかと、
654 ：Dream ★ ：02/03/26 17:41 ID:???: >>653
了解です～。
では私はbbs.cgi開発の方に注目いたします～
おきをつけて
655 ：Dream ★ ：02/03/26 17:48 ID:???: 各２ちゃんねるツールの仕様比較はこちら。

乱立する2ch用ブラウザの比較 Part3
http://pc.2ch.net/test/read.cgi/software/1015928913/l50
656 ：Dream ★ ：02/03/26 18:16 ID:???: 現状は・・・
>>154-163
あたりです。

現状、テストの成果としては、
>>582
>>589

というところです。
657 ：名無しさん＠お腹いっぱい。 ：02/03/26 18:27 ID:???: >>650　>>641ｗ

283KB

新着レスの表示

スレッドリストへ戻る全部前100 次100 最新50

0ch BBS 2004-10-30