【Project peko】2ch特化型サーバ・ロケーション構築作戦 Part17

**root▲ ★** · 05/02/03 05:34:37

peko作戦について語るスレです。
サーバロケーションPIEに関する話題もこちらで。

＜現在の主要なテーマ＞
・oyster243(BBQ/dnscache)の突然死対策&cobra2245セットアップによる2台体制化
・oytser902(memories)のFreeBSD 5.3化
・「雪だるま作戦」による、スケーラブルなサーバ群構築
・read.cgi/bbs.cgiの細かな調整・詰め
・携帯サーバのプライベート側スイッチのグレードアップ検討
・各種作戦・プロジェクトとの連携
・FreeBSDのさらなるチューニング詰め

＜関連スレッド＞
■新春特別企画「雪だるま作戦」liveサーバの飛躍なるか!? Part1
http://qb5.2ch.net/test/read.cgi/operate/1105035540/
■ 自動地震速報＠2ch をつくろう
http://qb5.2ch.net/test/read.cgi/operate/1106583619/
■ テレビ番組欄＠2ch をつくろう第2話
http://qb5.2ch.net/test/read.cgi/operate/1107366393/

＜関連サイト＞
レンタルサーバー maido3.com ２ちゃんねるの転送量: http://server.maido3.com/pie/
MRTGによる統計情報: http://mumumu.mu/mrtg/
２ちゃんねる/PINKちゃんねる稼動中のサーバ一覧: http://mumumu.mu/serverlist.html

＜前スレ＞
【Project peko】2ch特化型サーバ・ロケーション構築作戦 Part16
http://qb5.2ch.net/test/read.cgi/operate/1102087698/

**動け動けウゴウゴ２ちゃんねる** · 05/03/15 16:50:29

つか、関係スレを読まずに質問ですが、901を雪だるまに使う、ということでせうか？
そのへんがようわかりませんが。

**root▲ ★** · 05/03/15 16:59:16

雪だるまはいろいろな局面ですね。
まずは、live15 + liveb1 あたりかなと。

ネットワーク工事はさすがに今週中には終わるだろうから、
来週あたりからそっち方面は、ぼちぼちと。

**動け動けウゴウゴ２ちゃんねる** · 05/03/15 17:12:28

>>237
らじゃ　ということは今回の件は雪だるまとは別件？

**root▲ ★** · 05/03/15 17:17:14

>>238
今後ex10やlive20で関連する実験をするかもしれませんが、
直接関係するわけではないですね。

単に、サーバの限界値をみたいということで。

05/03/15 21:03:51

ex10.2ch.net
↓
206.223.151.225
↓
('･c_･` ) ＠ oyster901.peko.2ch.net ですよね？

可能なら逆引きおながいしますーm(_ _)m

**root▲ ★** · NG

>>221
1) 2) 3) 6) 7) 8) 9) 完了
4) live8 完了 ex7 進行中
10) 11) 明日以降、動かしながら

**root▲ ★** · NG

>>222

http://live20.2ch.net/_service/
http://ex10.2ch.net/_service/

よろしくです。

**root▲ ★** · NG

5) いきます。

以下のDNSの変更をよろしくお願いします。

(現在)
+ex7.2ch.net:206.223.150.110
+live8.2ch.net:206.223.151.225

(変更後)
+ex7.2ch.net:206.223.151.230
+live8.2ch.net:206.223.151.230

**root▲ ★** · NG

ex10, live16, live20 で、禁断の果実(speedy_backend直接起動)を有効にしました。

この影響で、ex7とlive8の過去ログが一時的に見られなくなっています。
>>243 が終わってDNSが浸透すると、復活します。

**root▲ ★** · NG

>>244
ex10、speedy_backendの暴走が起こりますね。
結果、speedy_backendがたまっていく。

ex10だけ、一時的にはずしました(元の状態)。
今のex10のセッティングは1280 + -M32。

**root▲ ★** · NG

>>245
/usr/local/bin/speedy_backendを以下のシェルスクリプトに変更し、
本物は/usr/local/sbin/speedy_backendに置いて、
ex10の禁断の果実を再度有効にした。

#! /bin/sh -
# speedy_backend with CPU time limit
# created by mumumu, 2005/3/16

ulimit -t 120
exec /usr/local/sbin/speedy_backend $*

**root▲ ★** · NG

>>246
今1プロセスspeedy_backendの暴走が起こりましたが、
ちゃんと120sec(2min)になった時点で自爆することを確認しました。

これで、相当耐久力あがったはず。
live16とlive20にも入れてこよう。

**root▲ ★** · NG

>>247 done.

落ち着いたら、ex10実験スレを立てるか。

**root▲ ★** · NG

ex10だけどんどん暴走プロセスがたまっていくので、
-t 30 にした。

**root▲ ★** · NG

live16 / live20 も -t30 にした。

**root▲ ★** · 05/03/17 02:35:39

ex10だけ、-t 10 にした。

ex7が重い重い重い重い重い重い重いtiger503
http://qb5.2ch.net/test/read.cgi/operate/1096837151/704-

**root▲ ★** · 05/03/17 02:39:58

あと、5分に1回動く統計処理を軽くする必要があるかな、とチラシの裏。< ex10

◆Reffi/bQ.c · 05/03/17 02:56:01

実際に使ってるかわからないけど重要修正のようですので投下しておきます。

[patch] ip_fastfwd.c: fast forward will crash the system in 5.x
ttp://www.freebsd.org/cgi/query-pr.cgi?pr=kern/78893

**root▲ ★** · 05/03/17 02:57:29

>>253
どもです。
２ちゃんねるのサーバは、net.inet.ip.fastforwarding=0 っすね。

**動け動けウゴウゴ２ちゃんねる** · 05/03/17 11:14:13

http://www.excite.co.jp/
peko作戦サーバ・・・！？

**動け動けウゴウゴ２ちゃんねる** · 05/03/17 11:41:05

>>255
どうみたってsunの鯖つかってますが
peko作戦の鯖は確かtyan系統だったかと（違ったらスマソ）

◆BDFCNV1.to · 05/03/17 15:00:44

>>243
done

◆MIPS.kHN86 · 05/03/17 15:06:47

ex7の方はまだ変わってないな・・・

**root▲ ★** · NG

>>257
確認しました。

>>258
TTL = 300 なので、正しく実装されてれば、
おっつけ、かわるはず。

しばらくしたらディスクあけるために、前のところにあるファイルを消します。

**root▲ ★** · 05/03/18 04:27:18

旧 live8 と旧 ex7 から古いファイルを消去し、HDDを空けた。
いずれも、memoriesに収容済み。

**root▲ ★** · 05/03/18 04:51:47

今日は重くならなかった、、、とすると。
投稿数は大幅には変わっていないから、>>251 が効いたのか、
あるいは live8 と ex7 の offlaw.cgi がいなくなったからか。

**動け動けウゴウゴ２ちゃんねる** · 05/03/18 09:36:06

>>261
ひとつ質問でーす

offlaw.cgiって何かしらの媚薬(speedyとか)を盛ってましたっけ？
# そもそもofflaw.cgiのコール数が少ない罠でしょうけど

**root▲ ★** · NG

>>262
なんにも。普通のCGIのはず(C)。

コール数はきちんと見てないけど、直感的には結構ばかにならんかもです。
特に ex7 の過去ログとか、何GBytesもあったりしたし。

**動け動けウゴウゴ２ちゃんねる** · 05/03/18 17:07:30

>>263
そーなるとDSOいれてもいいかも。。。
狐さんと相談してみては

**root▲ ★** · NG

>>264
「どうしますかねぇ」みたいな話は、既に（りゃ。

**動け動けウゴウゴ２ちゃんねる** · 05/03/18 18:44:38

>>265
（りゃ　していないですよｗ

で、手をつけたらmemoriesの負荷が恐ろしいぐらい軽くなる悪寒

**未承諾広告※** ◆TWARamEjuA · 05/03/19 11:45:10

ここでよかったかしら？
http://www.ring.gr.jp/ring/ntp.html.ja
だそうです♪

**root▲ ★** · 05/03/19 15:01:59

>>267
ふむ、RINGすか。
米国にあるサーバから使うのはあれですけど、いいんではないかしら。

あと、同じ名前付けてDNSラウンドロビン使うんなら、stratumはそろえた方がいいかもです。

**動け動けウゴウゴ２ちゃんねる** · 05/03/19 15:26:08

>>268
そろえるのはとても無理だと思いますよ。

**root▲ ★** · NG

>>269
ふうむ、、、。
なら、stratumごとにグループ名を変えるとか。

s1.ntp.ring.gr.jp
s2.ntp.ring.gr.jp

**動け動けウゴウゴ２ちゃんねる** · 05/03/19 16:40:03

>>270
それが妥当なラインでしょうねー

**root▲ ★** · 05/03/21 02:24:37

どうも、bbs.cgiが暴走するみたいなので、禁断の果実をいったんやめた。< ex10 / live16 / live20

で、そのかわりといってはなんだが、
speedy フロントエンドとバックエンドの間の通信に使う一時ファイルを、ジンギスカン上に作るようにしてみた。
(-T/md/tmp/speedy を追加)

#!/usr/local/bin/speedy -- -M32 -b1048576 -t660 -T/md/tmp/speedy

ex7が重い重い重い重い重い重い重いtiger503
http://qb5.2ch.net/test/read.cgi/operate/1096837151/739-741

**FOX ★** · 2005/03/21(月) 20:56:20

It appears Tiger503's boot partition is damaged.
I do not know if it is the drive or the files.
Are these SCSI drives setup to mirror?
If so, then I belive it is file damage.
Otherwise, probably the hard drive.

**動け動けウゴウゴ２ちゃんねる** · 2005/03/21(月) 21:01:46

>>273
（ﾉ∀`）ｱﾁｬｰ

**動け動けウゴウゴ２ちゃんねる** · 2005/03/21(月) 21:03:33

さようなら、楽しい思い出

◆yadoQ//n/E · 2005/03/21(月) 21:04:04

ｶﾞ━━━━ΣΣ(ﾟДﾟ;)━━━━ﾝ

**動け動けウゴウゴ２ちゃんねる** · 2005/03/21(月) 21:08:41

Tyger! Tyger! burning bright,
In the forests of the night,
What immortal hand or eye
Could frame thy fearful symmetry?

**動け動けウゴウゴ２ちゃんねる** · 2005/03/21(月) 21:14:20

>>277
ブレイクですな

**動け動けウゴウゴ２ちゃんねる** · 2005/03/21(月) 21:15:35

虎よ！　虎よ！　あかあかと燃える
闇くろぐろの　夜の森に
どんな不死の手　または目が
おまえの怖ろしい均整を　つくり得たか？

**動け動けウゴウゴ２ちゃんねる** · 2005/03/21(月) 21:15:53

ハードディスクがあぼーんしたの？

◆UFUFUbWUSk · 2005/03/21(月) 21:16:36

Tyger! Tyger!輝き、Inを燃やす、夜、Whatの不滅の手
または目のCouldの森林が縁どるあなたの恐ろしい対称?

◆WMaLhm.gkw · 2005/03/21(月) 21:17:14

無断超訳
　　Tiger503のbootパーティションが逝ったぽ。
　　ハードディスクが逝ったのかファイルが逝くったのかはシラネ。
　　SCSIドライバの設定をミラーしているんなら、ファイルが逝ったと思われ。
　　そうじゃないのなら、ハードディスクがシボンヌ。

……直前のバックアップまで巻き戻るですみますように（-人-）ﾅﾑﾅﾑ

**動け動けウゴウゴ２ちゃんねる** · 2005/03/21(月) 21:28:05

3/16まで入ってたex7の分のログは既にSumaディスクのほうに保管済で、
いまtiger503にはいってるのは3/16～のlive20のログだけなはずだから。。
まぁ不幸中の幸いってやつだけどな、

**動け動けウゴウゴ２ちゃんねる** · 2005/03/21(月) 21:33:45

raidにすれよ、PIEさんよ

**動け動けウゴウゴ２ちゃんねる** · 2005/03/21(月) 21:45:25

過去は速やかに忘れて再開きぼぬぬ

**動け動けウゴウゴ２ちゃんねる** · 2005/03/21(月) 22:39:58

boot partitionが㌧だだけなら別システムに繋げば吸い出せるでしょうけど…‥

>284
>273の3行目をよく読んでみよう。RAIDは論理破壊には全くの無力だ。

**root▲ ★** · 2005/03/21(月) 22:51:24

やはり、HDDですか。

向こうのスタッフと調整する必要ありですね。
すすめます。

システムディスク(disk #1)なら、ディスク交換してOSインストール、
/homeが入っているユーザディスク(disk #2)なら、
システムディスク側にある定時バックアップから戻すということで。

今日6:00の段階の、disk #2 => disk #1へのバックアップは、とれているようです。

DUMP: Date of this level 0 dump: Sun Mar 20 13:00:16 2005
DUMP: Date of last level 0 dump: the epoch
DUMP: Dumping snapshot of /dev/da1s1d (/home) to /var/backup/L0/dumper-home.dump
DUMP: mapping (Pass I) [regular files]
DUMP: Cache 8 MB, blocksize = 65536
DUMP: mapping (Pass II) [directories]
DUMP: estimated 365168 tape blocks.
DUMP: dumping (Pass III) [directories]
DUMP: dumping (Pass IV) [regular files]
DUMP: DUMP: 373993 tape blocks on 1 volume
DUMP: finished in 78 seconds, throughput 4794 KBytes/sec
DUMP: level 0 dump on Sun Mar 20 13:00:16 2005
DUMP: Closing /var/backup/L0/dumper-home.dump
DUMP: DUMP IS DONE

**動け動けウゴウゴ２ちゃんねる** · 2005/03/21(月) 23:00:24

>>287
ガンバレ

**動け動けウゴウゴ２ちゃんねる** · 2005/03/21(月) 23:24:59

pc2鯖がバックトゥザフューチャーしたときのこと思い出した。

今度は失敗しないでね（はぁと

**動け動けウゴウゴ２ちゃんねる** · 2005/03/21(月) 23:30:45

root▲ ★たん、がんばって♪乙～
FOX ★死ね

**root▲ ★** · NG

TODO: tiger503 トラブル対応
TODO: pc5の土地をmemoriesに造成

**動け動けウゴウゴ２ちゃんねる** · 2005/03/22(火) 02:06:19

>>289
バックトゥザネイチャーうんこを思い出した。

**FOX ★** · 2005/03/22(火) 02:14:20

pc5 固め終わっています

p , t , d

**root▲ ★** · NG

memories上に、土地作りできました。
http://pc5.peko.2ch.net/

DNS変更依頼いきます。

(現在)
+pc5.2ch.net:206.223.151.55

(変更後)
+pc5.2ch.net:206.223.151.230

**root▲ ★** · NG

>>293
収容 & memoriesへの展開作業、入ります。

**FOX ★** · 2005/03/22(火) 02:20:19

>>294
要請出しました

◆Reffi/bQ.c · 2005/03/22(火) 02:34:18

FreeBSD 5.4　Beta1がＦＴＰに来ますた。

**root▲ ★** · NG

>>297
4月末～5月初めに修行を兼ねてPIEに行くかもしれないので、
その時にごにょごにょしようかなと。

**root▲ ★** · NG

>>293 >>295
収容完了しました。
http://pc5.peko.2ch.net/kakolog.html

**FOX ★** · 2005/03/22(火) 13:26:11

>>294
done

**root▲ ★** · 2005/03/22(火) 15:21:56

http://qb5.2ch.net/test/read.cgi/operate/1105645765/206 について。
とりあえず、以下が見つかったのでおれさまメモ。
ex10とかlive系とかでは、使えるかも。

http://www.geocrawler.com/mail/msg.php3?msg_id=5151086
(Google cache)
http://64.233.179.104/search?q=cache:B6qawydJdgIJ:www.geocrawler.com/mail/msg.php3%3Fmsg_id%3D5151086+kern.filedelay%3D240&hl=ja

FROM: Tony FinchDATE: 02/12/2001 13:13:51SUBJECT: RE: Any ideas on keeping the disk spun down on laptop Kevin Oberman <<EMAIL: PROTECTED>> wrote:
>
>Has anyone looked into making update(4) not do any disk IO when there
>have been no changes to metadata? And, is there a way to extend the
>update period? Or am I completely off base in my belief that update(4)
>is the source of the continuing disk accesses.

There is a simple patch to extend the time between syncer runs: see
PR#21859. I've been running with this for months now and it works
nicely. In /etc/sysctl.conf I have

kern.syncdelay=250
kern.filedelay=240
kern.dirdelay=230
kern.metadelay=220

and in my kernel configuration file I have

options SYNCER_MAXDELAY=1024# allow up to 17 minutes between syncs

**root▲ ★** · 2005/03/22(火) 16:06:05

BBS/BBX/BBY/BBR/BBMの許可リストにbanana313(= pc8)のIPアドレスを登録しました。

F22の起動は、動き出してから。

**動け動けウゴウゴ２ちゃんねる** · 2005/03/22(火) 18:00:16

現地はもう深夜ってことは、live20の復旧はまだ先かな

**FOX ★** · 2005/03/22(火) 23:46:19

oyster901 の性能の件について

重いのは、当然アクセスが多いからではあるが、
それはおいて置いて、

ボトルネックは何? (HD? or RAM? or others?)

HD であるなら２ちゃんねるの動作仕様を変えるしか手が無いと思う
RAM であるから、増設して実験してみたい。
others であるなら何?

◆Reffi/bQ.c · 2005/03/23(水) 00:17:24

この調子ですと４月中には正式版出るかも

ttp://www.freebsd.org/releases/5.4R/schedule.html

**FOX ★** · 2005/03/23(水) 00:23:06

本日の実験の結果から言うと

1) httpd は増やしてもメモリばっかり食っていまいち。
2) -M を増やすと投稿/min は伸びる(まだ天井は見ていない)
3) deflate は結構重い
4) read.cgi はこのサーバではゴミのようだ
5) 現在の資源での極大値は　-M増加、httpd増やさない、defalteカットででるらしい

**root▲ ★** · NG

>>306
ですね。
補足すると、

1)tigerサーバの場合ですが、read.cgiが多いサーバは、httpdがたくさん必要な傾向があるようです。
芸スポのあびる優祭りの際には、httpdが売り切れる現象を目撃しました。
あと、マツケンサンバの時は、必ず売り切れてしまうようです(泣。
あと、ex10はROMが少ないというのも、影響しているように思います。

2)他の原因をとっぱらってやると伸びるということは(read.cgi止めるとかdefleteを切るとか)、
書き込み数はまだ裁ける可能性があるということですね。
これは、夜の実況が投稿数の割に軽いとか、ドスペよりも海老沢会長の方がレス数が多くなるとかの、
統計的事実や私の感覚とも一致しています。

3)帯域に余裕があるなら、deflete止めたほうがいいのかもですね。

4)read.cgi起動数は、news18と同じぐらいです。直読み数は数倍違いますが。

5)この方針で明日以降も、ごにょごにょしてみるということで。
ex10だけデフォルトでdeflete止めるように、.htaccessを設定してみるか。

**FOX ★** · 2005/03/23(水) 00:41:32

私は index.html subject.txt 更新を
適当にサボるように bbs.cgi を改造してみるか、

**root▲ ★** · NG

>>308
マニラで話してた例のやつですね。subject.txtを非同期にすると。

路線としては、
・3回に1回にする
・ランダムに手を抜く
・subject.txt/subback.html/index.html生成を別プロセスにして、たまに動かす

とかか。

ということでこの話題は、bbs.cgiスレで。

**動け動けウゴウゴ２ちゃんねる** · 2005/03/23(水) 01:30:46

>305
現在、順調に遅れていますのでそのページにゲタをはかせた日付で準備して置いてください。

**root▲ ★** · NG

ex10だけ、圧縮を切る設定を入れた。
.htaccess で以下を設定。

# for test: disable gzip on ex10 -- mumumu, 2005/3/23
SetEnvIf Host ex10 no-gzip

**root▲ ★** · NG

さて、live20の状況を気にしつつ、そろそろおやすみ。

**root▲** · 2005/03/23(水) 09:32:18

クリトリス

**動け動けウゴウゴ２ちゃんねる** · 2005/03/23(水) 11:02:12

>>313

**動け動けウゴウゴ２ちゃんねる** · 2005/03/23(水) 12:09:40

>>314

**動け動けウゴウゴ２ちゃんねる** · NG

えーっと・・・
>>313はるーたんの書き込みでＯＫ？

**動け動けウゴウゴ２ちゃんねる** · 2005/03/23(水) 14:07:21

壊れたところ始めてみた。もうけもうけ。

**動け動けウゴウゴ２ちゃんねる** · 2005/03/23(水) 14:22:46

FOXの壊れっぷりを見てるからさほど驚かない

**動け動けウゴウゴ２ちゃんねる** · 2005/03/23(水) 14:26:04

普段のトリップとは違うわけだが。。。

**動け動けウゴウゴ２ちゃんねる** · 2005/03/23(水) 14:27:29

★ないけど、そうなの？

**ピロリ** · 2005/03/23(水) 15:11:26

Tiger503 has had HD0 replaced with new 37gb SCSI disk.
It has been re-installed and is back online.
Please login via SSH, mount /home partition and check.
-Sean

と言っているが、

**Exciteさんから** · 2005/03/23(水) 15:20:06

Tiger503はHD0を新しい37gb SCSIディスクに取り替えさせました。
それは、再インストールされて、オンラインで戻っています。
SSH、マウント/家のパーティションでログインして、チェックしてください。
-ショーン

◆yadoQ//n/E · 2005/03/23(水) 15:28:52

ｷﾀ━ヽ(ﾟ∀ﾟ)ﾉ━ !!

**動け動けウゴウゴ２ちゃんねる** · 2005/03/23(水) 15:46:55

>>321
ということは/のほうですたか
とりあえずえがったえがった・・・・のだろうか？

**root▲ ★** · 2005/03/23(水) 17:16:33

>>321
ログインできました。状況確認。

・/home (#2 disk、掲示板システム)は中身も含めて無事
・システムディスク (#1 disk) は、FreeBSD 5.3Rが入った状態

ということで、これからシステム側をもみもみします。
今夜には復活できる予定。

**動け動けウゴウゴ２ちゃんねる** · 2005/03/23(水) 17:19:51

>>325
ということで、これからシステム担当のｵﾆｬﾉｺをもみもみします。
工エｴェｪ(ﾟДﾟ)ｪェｴエ工

**動け動けウゴウゴ２ちゃんねる** · 2005/03/23(水) 17:28:34

>>325
ということで、これからシステム担当のｵﾆｬﾉｺをむぎゅします。
　　。　。
　 / ／ﾎﾟｰﾝ！
( Д )

**動け動けウゴウゴ２ちゃんねる** · 2005/03/23(水) 18:59:21

>>325
おお、えがったえがったですー

ばんじゃーい

**root▲ ★** · 2005/03/23(水) 20:04:54

live20構築中、、、。

http://blog4.fc2.com/enoki/blog-entry-25.html

ううむ、Perlが。

**root▲ ★** · NG

>>329

lang/perl5 has been updated to 5.6.2, and lang/perl5.8 has been updated to 5.8.6.
you should update everything depending on perl, that is:

というわけで、Perlの更新をする時は、Perlに依存したソフトを全部更新する必要があると。
5.4Rにする時には、工事が必要になるわけか。

**未承諾広告※** ◆TWARamEjuA · 2005/03/23(水) 21:20:28

そのままln -sしただけではダメなのかな？

**root▲ ★** · NG

>>331
問題の先送りってやつですね。
たぶん大丈夫なんでしょうけど、どうせ入れ替えると割り切って
流れに身を任せるほうが、あとで禍根を残さないかも。

**動け動けウゴウゴ２ちゃんねる** · 2005/03/23(水) 21:27:31

>330
/usr/potts/UPDATINGをperl5で検索するとportupgradeするスクリプトがかいてありんす。

**root▲ ★** · NG

最終段階に入ったのですが、、、。
最後にApache起動テストをしたら、黙ってしまいました。なぜだろう。

リブート依頼します。

**root▲ ★** · NG

リブート待ち中。

…とてもいやな落ち方なので、
メモリとか、そういう問題かも。