【Project peko】2ch特化型サーバ・ロケーション構築作戦 Part15

**▲:/usr/local/bin/ch2 -o i686** ◆P8fXJj6wwo · 04/08/21 15:04

peko作戦について語るスレです。
サーバロケーションPIEに関する話題もこちらで。
現在の主要なテーマはpeko/cobraおよびtigerサーバが
特定条件下における突然死の原因究明です。
９月にrootさんが現地へ渡米して作業するそうです。

＜関連サイト＞
レンタルサーバー maido3.com ２ちゃんねるの転送量: http://server.maido3.com/pie/
MRTGによる統計情報: http://mumumu.mu/mrtg/
２ちゃんねる/PINKちゃんねる稼動中のサーバ一覧: http://mumumu.mu/serverlist.html

＜運営板PINKちゃんねる関係＞
【Project ama】PINKちゃんねる特化型ｻｰﾊﾞ構築作戦 Part2
http://qb5.2ch.net/test/read.cgi/operate/1082721809/l50
【PINKちゃんねる】新サーバ獲得会議☆3
http://qb5.2ch.net/test/read.cgi/operate/1080295660/l50

＜携帯電話特化型サーバ構築作戦関係＞
【Love Affair】携帯からのアクセスに対する考察・次の一手 Part2
http://qb5.2ch.net/test/read.cgi/operate/1088657713/l50

＜前スレ＞
【Project peko】2ch特化型サーバ・ロケーション構築作戦 Part14
http://qb5.2ch.net/test/read.cgi/operate/1087666806/l50

**留守番 ★** · 04/11/24 17:07:33

たぶん　たぶん
2001年8月の２ちゃんねるの規模は、、、
現 tiger 2台とみた、

**動け動けウゴウゴ２ちゃんねる** · 04/11/24 17:46:55

北ネット弱えええ！！！

**動け動けウゴウゴ２ちゃんねる** · 04/11/24 18:42:32

それは・・・（びっくり

そりゃあ色々変わっていくのが自然だよなぁとオモタ。

**root▲ ★** · 04/11/24 19:45:50

>>576
今一番働いているtiger = tiger503 = ex7の最大転送量が、
圧縮して14～15Mbpsぐらい。
http://mumumu.mu/mrtg/mrtg-rrd.cgi/traffic/ex7traf.html

2台だと、圧縮して30Mbpsぐらいはさばけると。

この頃って、もう圧縮してた(mod_gzip)はずだから、
http://web.archive.org/web/20011127064159/http://www.yakin.cc/

tiger4台分ぐらいなんじゃないかしら。

**root▲ ★** · 04/11/24 19:49:12

てことはなにかい。

4 x (morningcoffee + news4vip + entrance + keiba + base) = 2001年8月の２ちゃんねる

っていうことなのか。

**動け動けウゴウゴ２ちゃんねる** · 04/11/24 19:49:12

8月の閉鎖騒動の時は圧縮してなかったんでわ？

**root▲ ★** · 04/11/24 19:50:21

>>581
そっすね。
圧縮前の転送量ベースなら、ほぼぴったりか。

**動け動けウゴウゴ２ちゃんねる** · 04/11/24 19:50:39

>>580
狼とVIPの書き込みの多さはただごとじゃないからのう
野球と競馬もROMが半端なく多いからのう

**さぼてん ★** · 04/11/24 19:59:30

つまり、圧縮して30Mbpsくらいだったのかぁ。
2001年8月の２ちゃんねる
= 2 x ex7鯖
= ex7鯖 + news18鯖 + news19鯖 x 2
= morningcoffee + news4vip + entrance + keiba + base + anime + mnewsplus + newsplus x 2
(trafiicinfoは各種データがmnewsplusの2%くらいなのではずした)

(ﾉ∀`)ｱﾁｬｰ

**動け動けウゴウゴ２ちゃんねる** · 04/11/24 21:53:32

すげー

あらゆる意味で・・・

**動け動けウゴウゴ２ちゃんねる** · 04/11/24 21:56:21

もしかして、bbs.cgi内で開いたファイルで
明示的にcloseしてないのがあって
それがmod_perlで動作させようとしたときに影響してる、
なんてことはないですかね。

いや、mod_perlでexitした時の動作とか全然知らないし
メモリ不足が原因なら、全然関係ないんですが。

**動け動けウゴウゴ２ちゃんねる** · 04/11/25 05:31:21

exitの代わりにreturnで戻すのはだめ？
常駐してんだから終了させんじゃなくapacheに戻してやる。
exitするとデータがクリアしたのに、他のプロセスで同じモジュールが動き続けて馬鹿になってゾンビが出る。
dieは？こいつも同じ原因を作る。

**root▲ ★** · 04/11/25 18:15:12

mod_perlからはとりあえず一時撤退するとして、
SpeedyCGIを使ってみるというのは、どうなんだろう。

**root▲ ★** · 04/11/25 18:45:57

Perl側を変えないとすると、こうかな。
# まだ入れてない。

LoadModule speedycgi_module libexec/apache2/mod_speedycgi.so

# まずは安全のため、機を見てコメントアウトとか数字を増やすとか
<IfModule mod_speedycgi.c>
MaxRuns 0
</IfModule>

# bbs.cgiだけSpeedyCGIにしてみる
<IfModule mod_speedycgi.c>
<Files bbs.cgi>
SetHandler speedycgi-script
</Files>
</IfModule>

**root▲ ★** · 04/11/25 23:23:58

きたく。ねむい。

>>589は、明日昼間あたりに入れてみるか。

**留守番 ★** · 04/11/25 23:29:25

これは何がどうなってどうなると予想されるものなんですか?
現状の２ちゃんねるにおいての話しとして、

**root▲ ★** · 04/11/25 23:38:52

>>591
これが、一番まとまっていると思います(原文の翻訳かな)
http://perldoc.jp/docs/modules/CGI-SpeedyCGI-2.21/SpeedyCGI.pod

つまりうまくいけば、Perl CGIの実行パフォーマンスが数倍になると。
で、こいつはmod_perlよりお手軽で、
mod_perlほど元プログラムをいじらなくても導入できる見込みがあると。

かつ、suexecとも仲が悪くないらしいし、
root権限なくても動かせるというのも、魅力的すね。

**root▲ ★** · 04/11/25 23:40:32

mod_perlにしてもそうですが、
基本路線としては、c系(PHP)を高速化した路線と大同小異です。

つまり、毎回でっかいPerlインタプリタを起動するコストを下げたいと。

**留守番 ★** · 04/11/25 23:45:11

LA を下げるのに寄与するって考えればいいのかな?
処理が比較して短い時間で終るからどんどん捌けるという路線?

**root▲ ★** · 04/11/25 23:47:15

てなわけで、

if 成功
bbs.cgi のすばらしい高速化が実現し、負荷耐性が上がるかもしれない
else
歓迎せざる、予期せぬ結果を招くかもしれない
endif

ということになります。

いろいろ調べていて、それなりに高速化の成功例も報告されているようなので、
まずは実験してみようかなと。

**root▲ ★** · 04/11/25 23:49:43

>>594
そですね。短い時間というか、
1つのbbs.cgi起動・実行をより少ない資源で済むようにすると。

仕込みはしてあるので、
万一「あっちゃー」が起こった時にリブートしていただけるんでしたら、
今やってもいいかなぁ、とか思っていたりして。して。

**動け動けウゴウゴ２ちゃんねる** · 04/11/25 23:51:44

　 _ 　∩
(　ﾟ∀ﾟ)彡　じっけん！じっけん！
　⊂彡

**留守番 ★** · 04/11/25 23:51:48

i am ready

**root▲ ★** · 04/11/25 23:52:40

>>598
どもです。
んでは、やってみますね。

**root▲ ★** · 04/11/25 23:56:52

入れた。まずは、

<IfModule mod_speedycgi.c>
MaxRuns 0
</IfModule>

入り。

**root▲ ★** · 04/11/25 23:57:53

#<IfModule mod_speedycgi.c>
#MaxRuns 0
#</IfModule>

をコメントアウトした。

**留守番 ★** · 04/11/25 23:57:59

tiger503 (ex7) ですか?

**root▲ ★** · 04/11/25 23:59:22

ちょっと様子見、、、。

**root▲ ★** · 04/11/25 23:59:35

>>602
そうです。

**root▲ ★** · 04/11/26 00:00:00

ひょっとすると、設定間違ってて、
bbs.cgiの1行目を直さないといけない、、のかも。

**root▲ ★** · 04/11/26 00:02:46

bbs.cgiの1行目を、

#!/usr/local/bin/speedy

に変更した。

**root▲ ★** · 04/11/26 00:03:48

>>606 はだめすね。
/usr/bin/perl に戻しました。
効いてない、、、。のかも。

**留守番 ★** · 04/11/26 00:04:22

どんどん　LAが・・・

**root▲ ★** · 04/11/26 00:04:37

うまく効いてないかな？
500 エラーになるすね。>>606

**root▲ ★** · 04/11/26 00:05:41

この状態でしばらく動かしてみるです。

>>608
LAは、この時間のex7だといつもこんなかんじすね。

**root▲ ★** · 04/11/26 00:06:19

つまり、LA=30とか50とかでは、どってことないってころです。< この時間のex7

**留守番 ★** · 04/11/26 00:08:02

>>606 の直後にどんどん上昇し始めて
>>607 の直後から元にもどり始めた

ということです。

**動け動けウゴウゴ２ちゃんねる** · 04/11/26 00:09:44

mod_perl化のための一歩
・exit()をApache::exit()でオーバーライド

**root▲ ★** · 04/11/26 00:10:08

ですね。500エラーの原因をつかむ必要がありそう。

**root▲ ★** · 04/11/26 00:11:33

今Apache起動しなおしました。LAが一時的に上がるです。

**root▲ ★** · 04/11/26 00:15:20

ふむ、やはり500エラーになるですね。

(>>606を>>600入りでやってみた)

**root▲ ★** · 04/11/26 00:17:02

[Thu Nov 25 07:14:22 2004] [error] [client 219.197.196.67] Premature end of script headers: bbs.cgi, referer: http://ex7.2ch.net/test/read.cgi/morningcoffee/1101308600/l50

って言うなぁ。< speedyに食わせると

**root▲ ★** · 04/11/26 00:18:37

ちょっと、簡単なスクリプトで試してみるです。

**root▲ ★** · 04/11/26 00:21:09

http://ex7.2ch.net/test/mod_speedycgi/mod_perl_test.cgi

動くみたいだなぁ。
(mod_perl_testとなってますが、speedycgiで実行してます)

**未承諾広告※** ◆TWARamEjuA · 04/11/26 00:21:17

>>617
use CGI::Carp qw(fatalsToBrowser);

を入れると、エラーの実態が表示されるので参考になるかと。
ただし、その部分のソースコードも表示されるのでｺﾞﾆｮｺﾞﾆｮ

**root▲ ★** · 04/11/26 00:24:01

>>620
うーむ、それわ、、、。

**未承諾広告※** ◆TWARamEjuA · 04/11/26 00:26:42

>>621
とりあえず、正しいhttpdレスポンスを吐き出していないかと思いますです（苦笑）＞ぷりめちゃーなんたら

**動け動けウゴウゴ２ちゃんねる** · 04/11/26 00:29:44

#!/usr/bin/speedy -r10000

use strict;

use warnings;

use sigtrap;

...

**root▲ ★** · 04/11/26 00:32:32

<IfModule mod_speedycgi.c>
<IfModule>

で囲んじゃ、だめとわかたです。
囲まなければ、1行目を変えなくてもspeedyで起動する(で、500エラー)。

**root▲ ★** · 04/11/26 00:37:08

MaxRuns 0
ではなくて、
SpeedyMaxRuns 0
だったとわかったです。

ちなみに上記でも500エラー。

あとは、500エラーの原因は何か、と。

**未承諾広告※** ◆TWARamEjuA · 04/11/26 00:38:13

んぢゃ、cp bbs.cgi ナンタラbbs.cgi で複製を作って、 use CGI::Carp qw(fatalsToBrowser); 入れちゃうとか(^-^;)

でもってそろそろ眠m(_ _)m

**root▲ ★** · 04/11/26 00:40:49

で、さらに、
<IfModule mod_speedycgi.c>
ではなくて、
<IfModule mod_speedycgi2.c>
だとわかった。

あとは、500エラーの原因さえわかれば。

**動け動けウゴウゴ２ちゃんねる** · 04/11/26 00:43:25

exit使ったらだめとか

**動け動けウゴウゴ２ちゃんねる** · 04/11/26 01:03:27

順番にやっていけばいいかと
前提：perlccによる実行形式を削除
1) １行目を変えるのみ＆MaxRunsを1にする（-- -r1）
2) MaxRunsを指定しない
3) mod_speedycgiを使ってみる

**root▲ ★** · 04/11/26 01:08:35

-- -r1 があたりのもより。

**root▲ ★** · 04/11/26 01:10:42

動いたもより。

**root▲ ★** · 04/11/26 01:12:38

今の設定

LoadModule speedycgi_module libexec/apache2/mod_speedycgi.so
<IfModule mod_speedycgi2.c>
SpeedyMaxRuns 1
</IfModule>

で、
<IfModule mod_speedycgi2.c>
<Files bbs.cgi>
SetHandler speedycgi-script
</Files>
</IfModule>

に設定。

これで、元bbs.cgiをいじることなく、bbs.cgiだけspeedycgi配下に。

**root▲ ★** · 04/11/26 01:13:01

みるみるLAがさかってゆく、、、。< ex7

**root▲ ★** · 04/11/26 01:16:05

うそみたいに軽くなった。

これで、しばらくようすをみてみよう。

**root▲ ★** · 04/11/26 01:25:18

でもこれだと、毎回起動はしてる、、、だよなぁ、たぶん。

どのくらい効果があるかは、しばらく観察ということで、

ごはんたべてきます。

从o＾ー＾从御飯喰
http://ex7.2ch.net/test/read.cgi/morningcoffee/1101210350/

**動け動けウゴウゴ２ちゃんねる** · 04/11/26 01:26:30

たとえ-r1だとしても、バイトコンパイルのキャッシュが効くとか？

**動け動けウゴウゴ２ちゃんねる** · 04/11/26 01:29:05

>>635
静かに楽しそうでなんかうれしいよ

**動け動けウゴウゴ２ちゃんねる** · 04/11/26 01:30:58

もしかして$ENV{'QUERY_STRING'}でパラメータを渡しているところが初期化ルーチンの最初だけとかじゃ無い？

環境変数を渡すタイミングが初期化時だけだとハマりどころかも。

**動け動けウゴウゴ２ちゃんねる** · 04/11/26 01:34:09

あとexit前に
%Hoge = ();
みたいな感じで消去しとかないと-r1じゃないと動かないスクリプトになるという肝。

**root▲ ★** · 04/11/26 01:57:00

>>638-639
たぶん、備後の予感。
しかしわたしわ、Perlかけないし。

**名無し募集中。。。** · 04/11/26 02:05:26

よかったよかった

**从o＾ー.＾从御飯喰** · 04/11/26 02:07:05

>>640
ｶﾞﾝｶﾞﾚｰ｡

**root▲ ★** · 04/11/26 02:38:22

speedy_backendのゴミプロセスが残っていたようなので、それらをkillして、

SpeedyTimeout 60

を追加して、httpdを立ち上げなおした。

**root▲ ★** · 04/11/26 12:43:04

emの問題の続き

stable(RELENG_5)には、対応するするbugfix入りました。
Tue Nov 23 22:28:40 2004 UTC (2 days, 5 hours ago) by rwatson
http://www.freebsd.org/cgi/cvsweb.cgi/src/sys/dev/em/if_em.c?rev=1.44.2.4&content-type=text/x-cvsweb-markup

今度の RELENG_5_3 candidate は反映されるのかな。

**root▲ ★** · 04/11/26 12:43:33

お、するするって。
ま、いっか。

**root▲ ★** · 04/11/26 16:11:18

>>632 の設定する場合、
いうまでもなく、SuExecをやめないとだめでした。

つまり、

User ch2live16
Group ch2

とかにしないとだめ。

# いきなり(たぶん)ファイルロックかからなくって、ぐわわと重くなり、リブート、、、。

**root▲ ★** · 04/11/26 16:12:12

で、1行目を変える方法(#!/usr/bin/perl → #!/usr/local/bin/speedy -- -r1 -t60)なら、
SuExec配下になるので、従来どおりで問題ないと。

**root▲ ★** · 04/11/26 16:17:34

あ、もちろんその場合は、

#SuexecUserGroup ch2live16 ch2

は、上記のようにコメントアウトで。

**root▲ ★** · 04/11/26 16:43:40

ex7見ると、、、。

56485 ch2ex7 131 0 4320K 3680K RUN 0 69:32 68.70% 68.70% speedy_back
96829 ch2ex7 131 0 4316K 3680K RUN 2 184:26 67.48% 67.48% speedy_back
59449 ch2ex7 131 0 4320K 3684K RUN 0 64:19 66.99% 66.99% speedy_back

なんか、ぼそってるすね。例のbbs.cgiぼそり現象がそのままきてるのか。
うーん。

そっか、RLimitCPUとか、moduleにすると効かなくなるのね。

Apache側でlimitかけてやらんと、だめなわけね。
設定しよう。

しかし、実際に動かしてみないと、わからんことばかり。

**root▲ ★** · 04/11/26 17:00:10

apache2limits_enable="YES"
apache2limits_args="-e -t 60"

を/etc/rc.confに入れて、Apache再起動でいいのかな。
とりあえず、ex7にて。

**root▲ ★** · 04/11/26 17:50:27

>>650 を ex7 live16 live17 に入れた。

**root▲ ★** · 04/11/26 19:31:55

やっぱ、ぼそるすね。

16551 ch2ex7 127 0 4320K 3688K CPU2 1 9:37 96.14% 96.14% speedy_back

しかたないすね、、、。/etc/login.conf をいじろう。

**root▲ ★** · 04/11/26 19:34:51

~/.login_conf でいいのかな。

**root▲ ★** · 04/11/26 19:41:21

>>653
だめすね。login(1) でしか参照しないのか。

**root▲ ★** · 04/11/26 19:49:29

/etc/login.confに、

# for limiting www user
www:\
<TAB>:cputime=60:\
<TAB>:tc=default:

を足して、

cap_mkdb /etc/login.conf

を実行し、

apache2limits_enable="YES"
apache2limits_args="-e -C www"

を/etc/rc.confに設定して、apacheをrestartした。

**root▲ ★** · 04/11/26 20:02:30

うーむ。>>655 でも再発。

で、/etc/master.passwd のクラスのところに www と書いてもだめ。
さて、どうすべか。

◆BFzK/mtqM2 · 04/11/26 20:07:44

rc.confとかって再起動しないと有効にならないとか？

**動け動けウゴウゴ２ちゃんねる** · 04/11/26 22:48:32

portsからapahce2を入れていれば
/usr/local/etc/rc.d/apache2.shを読めばわかるが、
上記スクリプトapahce2.shからrc.confを舐めることになっている。

PORTNAME= apache
PORTVERSION= 2.0.52
PORTREVISION= 3

**root▲ ★** · 04/11/26 23:49:13

リミッターが効かないことでex7の怪我が大きくなったので、
リミッターが効く方法(CGI経由での呼び出し)にスイッチ。

具体的には、ex7のbbs.cgiの1行目を、

#!/usr/bin/perl

から、

#!/usr/local/bin/speedy -- -r1 -t60

に変更。

**root▲ ★** · 04/11/26 23:52:12

live16/live17 も >>659 と同様の変更を実施。

**root▲ ★** · 04/11/27 00:08:35

live8は、SuExecをやめる工事だけ実施。
bbs.cgiは、perlccもの。

**root▲ ★** · 04/11/27 02:03:06

tiger503 ex7 済み
tiger504 game10 済み
tiger505 news18 済み
tiger506 game9 済み
tiger507 live16 済み
tiger508 live17 済み
tiger509 news19 済み
tiger510 hobby7 済み

というわけで、掲示板のあるtigerはすべてバージョンアップ完了しました。

あとはぼちぼち、blackgoatをやるかな。
すいてる時間にかたっぽずつやれば、たぶんサービス止めないでいけるかと。

**root▲ ★** · 04/11/27 02:25:57

ex7 の様子を見る限りでは、>>659-660 の方法でも、それなりに効果あるのかも。
今日はちょっと夜11時前に事件があったんで、明日にはわかるのかなと。

**動け動けウゴウゴ２ちゃんねる** · 04/11/27 03:25:28

いいお湯でしたか！少しは疲れがとれましたか？
いつもお疲れ様です。
孤独な作業、そして皆が2ちゃんを気持ち良く利用できるように日々努力していただき、ありがとうございます。
がんばってください。
何も出来ないけど、応援しています。

**FOX ★** · 04/11/27 03:28:45

>>664
いえいえ

**動け動けウゴウゴ２ちゃんねる** · 04/11/27 03:30:24

>>665
>>665

**さぼてん ★** · 04/11/27 03:32:42

ああっ、FOX ★さんがっ（；　･`д･´）

**動け動けウゴウゴ２ちゃんねる** · 04/11/27 03:33:22

>>665
>>664は、root▲ ★さんへの励ましでした。誤解させてすみません。

**動け動けウゴウゴ２ちゃんねる** · 04/11/27 03:35:08

い
い
孤　　　　　　　←　　「　狐　」　じゃないぞ
が
何

**動け動けウゴウゴ２ちゃんねる** · 04/11/27 03:35:30

http://server.maido3.com/pie/
ここの画像読み込めないの漏れだけ？

**動け動けウゴウゴ２ちゃんねる** · 04/11/27 03:38:02

>>665
でも、FOX ★さんのあちらこちらでの縦横無尽のご活躍も凄いって思っています。
無理なさらないでください。
皆さんのこうした努力があって、この2ちゃんが快適に楽しめるんですね。
ありがとうございます。

**root▲ ★** · 04/11/27 03:41:34

FOXさんは、私の何倍も、何十倍も、すごい人ですから。（す）

**動け動けウゴウゴ２ちゃんねる** · 04/11/27 03:45:34

>>672 root▲ ★さん
そうなんですか、知りませんでした。
それと、大切な専用メモを荒らしちゃったみたいですみません。
黙って見ています。ありがとうございました。

暇人 ◆Ot/0qjZV1U · 04/11/27 13:48:44

root▲さんの俺様メモを見ていると昔EWSの管理者だった頃の事を思い出す。。。
campas noteを何冊埋めたことか・・・

**動け動けウゴウゴ２ちゃんねる** · 04/11/27 20:00:29

ここをROMってlogとって、経過を読むと実地の鯖運用記録として使えます。
本にならないかなぁ。

FOX＆root▲ ★の、動け動けウゴウゴServer構築運営管理ガイド。

萌え萌えUnixネットワーク管理ガイド風に、お二方をキャラ化して、David氏が黒いメガネ…
　　　　　　　　　　　　　　　　　　

**動け動けウゴウゴ２ちゃんねる** · 04/11/28 00:10:57

>>675
(･∀･)ｲｲ!
おもしろそ。実現ｷﾎﾞﾝﾇ