2ch特化型サーバ・ロケーション構築作戦 Part21

**root▲ ★** · NG

2ch特化型サーバ・ロケーション構築作戦のスレッドです。

・２ちゃんねるのサーバロケーション、PIEに関する関連作業・調整事項
・DNS登録・変更関連の各種作業や調整事項
・２ちゃんねるのサーバで採用しているOS、FreeBSDに関する情報・調整事項
・各種作戦・プロジェクトとの連携、プロジェクト間の連携

等を取り扱います。

現在、複数サーバによる連携により、
サーバ能力のさらなるスケールアップをめざすための「雪だるま作戦」が進行中です。
しかし、問題はあらゆる意味で山積の状態です。

また「２ちゃんねる証券取引所」をはじめとする「株」関連や「Be」の機能強化、
あるいは、次世代の携帯アクセス環境をめざした「べっかんこ作戦」の状況など、
気候も暖かくなり、そろそろ気になりだす季節にさしかかりつつある今日この頃、
あいかわらず２ちゃんねるは、刻一刻と確実に変化し続けています。

**動け動けウゴウゴ２ちゃんねる** · 2006/06/11(日) 20:20:37

誤爆スマソ

**root▲ ★** · NG

cobra2244 は上がったら、

1) 6.1R に戻す
2) single CPU mode への移行

のてはずで。

**root▲ ★** · NG

cobra2244 は、立ち上がってこない状態になった模様。

-stable にして、カーネルを 6.1R に戻したのが悪かったのかも。

**root▲ ★** · NG

514 名前：root▲ ★[] 投稿日：2006/06/11(日) 20:55:44 ID:???0 ?#
live23b は、立ち上がらない状態になった模様。

数度リブートしてもらいましたが、立ち上がらないです。
リモート KVM が使えるようになるまで、復旧作業ができない状態。

ううむ、、、。

**動け動けウゴウゴ２ちゃんねる** · 2006/06/11(日) 21:05:17

いつもおつかれさまだお。
（　^ω^）つt■ 　コーヒーどーぞだお

**root▲ ★** · NG

で、現在の状態で http://live23.2ch.net/livetbs/ とかをアクセスすると、
結構な時間、待つ模様。

httpd のスロットが、ふさがってくるかも。

**root▲ ★** · NG

そうか、一度 503 になれば大丈夫なのかな。>>901

そういう仕様か、、、。< mod_proxy

**root▲ ★** · NG

…見ていると、live23b は起きようとして
たまに ping かかる状態になっていますね(それでまた落ちてしまう)。

これが、>>902 の原因かも。

**root▲ ★** · NG

現状:

・tiger507 = ex15: ダウンしたまま。
現地に状況調査 & 確認依頼中

・cobra2244 = live23b: たまにping通るものの、ssh通るまでに至らず、
再度落ちる。

現地に状況確認 & 状況確認中。
KVM 経由でのシングルユーザオペレーションが必要な予感。

・上記2台にリモートアクセスするための remote KVM へのアクセスが支障中。

現地に状況確認 & 復旧依頼中。

**動け動けウゴウゴ２ちゃんねる** · 2006/06/11(日) 21:43:29

いやああああああああああああ

**動け動けウゴウゴ２ちゃんねる** · 2006/06/11(日) 21:57:02

rootｻｿお疲れ様です。

**root▲ ★** · NG

live23b これからの展開:

・>>897 を実施
・安定するなら、それで運用
・力(処理能力)が足りないようなら、涙を飲んで 6.0R に戻し、dual CPU へ

あたりかと。

stable 版を使うのは、特に amd64 ではリスクが大きいと。

**動け動けウゴウゴ２ちゃんねる** · 2006/06/11(日) 23:39:01

6.0-Rにすると、Apacheのバグがでるんじゃないの？

**root▲ ★** · NG

>>908
出る可能性ありますね。

あと、ex14 で起こっていたような、
ping かかるけれども他のサービスが全部死ぬ、
というパターンになることがありえます。

(6.1R/amd64 の場合、ping もかからなくなるのが違う)

**ピロリ** · 2006/06/12(月) 00:02:07

1) offlaw.cgi のための転送はやめる
2) その上で offlaw.cgi をどうするか考える。
3) read.cgi をどうするか考える。

な手順かと、

まずは転送&同期を止めましょう。

**root▲ ★** · NG

>>910
それ(過去ログのための転送&同期)は、NFS にした時点で既に全廃しているです。

**ピロリ** · 2006/06/12(月) 00:05:45

>>884- 以下あたりは解決しているということ?

**動け動けウゴウゴ２ちゃんねる** · 2006/06/12(月) 00:05:46

>>910
転送&同期？
offlaw.cgiはすでにバックエンドで動作してるけど

**ピロリ** · 2006/06/12(月) 00:06:28

んで
それは事の原因じゃないということ?

**ピロリ** · 2006/06/12(月) 00:07:07

>>911
when ?

**root▲ ★** · NG

今、同期とっているのは、

・板名/SETTING.TXT (更新されてなければ取り直さない)
・板名/kakolog.html (同上)
・キャップデータ等

になります。

>>912 は、NFS にする以前の設定です。

で、ちょっと前に NFS の設定に変えた。
この時点で転送&同期を全廃したわけです。(>>911 >>915)

現在、>>910 の状態になっていると理解しています。

…とここまで書いてわかった。

>>910 は、 offlaw.cgi のリクエストをバックエンドに転送するのも、やめるべし、
と言っていますか。

**root▲ ★** · NG

今の設定のまとめ。上のほうにもあるけど。

1) 過去ログのデータはバックエンドにある。フロントへのデータ同期はしていない。
2) バックエンドにある過去ログデータの NFS での共有は、今日やめた。
3) フロントで受け付けた offlaw.cgi のリクエストは、バックエンドにフォワードされ、
バックエンドで offlaw.cgi が実行され、フロント経由で結果が戻る。
4) フロントで動く read.cgi は dat 落ちしたデータについては「dat が存在しません」エラーになる。

**ピロリ** · 2006/06/12(月) 00:13:47

>>916
言ってマース。

付け焼刃はやめよう作戦。
多数の選択肢を用意して検討し一番良いと思われるのを
少々(時間的、人的)コストはかかってもやろうよ作戦。

それまでは offlaw.cgi は動かない read.cgi もいまいち
もいたし方がないかと、

**動け動けウゴウゴ２ちゃんねる** · 2006/06/12(月) 00:16:32

付け焼刃にしてから多数の選択肢を用意して検討し一番良いと思われるの
やっても問題はないでしょ

**root▲ ★** · NG

>>918
そういうことですか。
把握しました。

とりあえず＊今は＊、過去ログは致し方がないということにすると。

**ピロリ** · 2006/06/12(月) 00:17:29

決してそうは思いません
最悪手

>>919

**root▲ ★** · NG

>>919 もありかもですが、このへんは、
判断のしどころなのかなと。

**ピロリ** · 2006/06/12(月) 00:19:38

>>920

よろしくです。

さすがに十数人不眠不休で実況サーバのおもりをすることの意義を見出せません
かといって動かしたいのは山々で、

不安定要素は全部排除。
最小限の機能だけ動かす。

**ピロリ** · 2006/06/12(月) 00:20:45

>>922
絶対無いです。

offlaw.cgi @live22
offlaw.cgi @live23b
offlaw.cgi @news20b

止めてきます。

**root▲ ★** · NG

>>923
納得したです。

offlaw.cgi をはじめとする過去ログ関連の転送、
止める作業に入ります。

**ピロリ** · 2006/06/12(月) 00:26:56

offlaw.cgi @live23b　はサーバが落ちていたりするのかな?

offlaw.cgi @live22
offlaw.cgi @news20b
は止めました。

**動け動けウゴウゴ２ちゃんねる** · 2006/06/12(月) 00:28:00

offlaw.cgiが不安要素だなんて初耳。
おじちゃんあんまり最近の動き理解してないんでしょ。
「過去ログ」って言葉を不安定要素と決め付けてるように見えるぜ。

**ピロリ** · 2006/06/12(月) 00:29:17

理解していないのはあ・ん・た。

有無を言わせません。
指令です。

**root▲ ★** · NG

>>925
フロントからの offlaw.cgi の転送を止めました。

live23b = cobra2244 は、現在サーバダウン中です。

**ピロリ** · 2006/06/12(月) 00:31:05

この場合のとるべき戦略は、
「引けるとこまで引く」です。

つまり　雪だるまサーバを止める。

しかし・・・
あとは自分で考えてちょ
いちいち説明してなんかいられません。

>>927

**ピロリ** · 2006/06/12(月) 00:33:08

ちなみに、

cobra2244
tiger507
はリブート挑戦していますけど上がりません。

**root▲ ★** · NG

cobra2244 は作業中に、私がへまをしていまいちな設定になっている可能性が
一番大きいです。ごめんなさい。
リモートオペレーションが必要な状況と思われます。

tiger507 は他のフロントと同じ通常のリブートプロセスで
上がらなくなりました。原因はまだ解っていないです。>>931

**ピロリ** · 2006/06/12(月) 00:38:29

Sean がフェラーリを飛ばして向かっているところかと、
他の人@PIE では手にあまっている状況。

**動け動けウゴウゴ２ちゃんねる** · 2006/06/12(月) 00:41:45

offlaw.cgi がどうなってるか知らんけど
●もってても永久に過去ログが読めないってのはやめてね。

**動け動けウゴウゴ２ちゃんねる** · 2006/06/12(月) 00:42:02

よくわかんないなあ
とりあえず向こうのスレで討論会らしいので移動しますね

**root▲ ★** · NG

>>933
了解です。
# フェラーリ。

**ピロリ** · 2006/06/12(月) 00:58:07

ex15 ってジンギスカンが自動で組み込まれない?

**ピロリ** · 2006/06/12(月) 00:59:48

ん?
違うのか、、、

ちょっとごにょごにょ

**root▲ ★** · NG

私は cobra2244 のほうの作業します。

ex15 は現在、上がっている状態(で、dat がない状態)
と認識。

**ピロリ** · 2006/06/12(月) 01:04:31

public_html/news4vip/ が私から&cgiから見えない予感。

**ピロリ** · 2006/06/12(月) 01:06:20

cgi@tiger507　から news4vip が見えない。

SSHでログインしたとき ls で news4vip は見える。
しかし cd で入れない。状況。

FTPも同様。

**ピロリ** · 2006/06/12(月) 01:08:13

owner だかなんだかが違うんでないかい? >>939

**root▲ ★** · NG

>>941
確認します。

**ピロリ** · 2006/06/12(月) 01:11:02

ちなみに http で 403 です

**動け動けウゴウゴ２ちゃんねる** · 2006/06/12(月) 01:12:07

rootﾀﾝ頑張ってね(´・ω・`)

**root▲ ★** · NG

作業完了のはず。< ex15

他のフロントよりも、メモリディスクを拡張しました。
dat も流し込んだので、あとはピロリさんのほうで作業できると思います。

**動け動けウゴウゴ２ちゃんねる** · 2006/06/12(月) 01:16:09

ksk

**root▲ ★** · NG

何があったら呼んでくださいです。

cobra2244 の作業していますので。

**ピロリ** · 2006/06/12(月) 01:17:18

はーい

復帰しました。 < news4vip

**root▲ ★** · NG

ex15 は、復帰かければもとに戻るはず。

**動け動けウゴウゴ２ちゃんねる** · 2006/06/12(月) 01:18:09

1150042408.dat<>復活！！！！ (67)
1150042493.dat<>【しょこたんうざい】中川翔子反対同盟 (1)
1150042492.dat<>RPGツクール再生 (1)
1150042491.dat<>うらっしゃあああああああああああああああああああああ (1)
1150042432.dat<>(ﾟдﾟ)ん？ (4)
1150042480.dat<>まだ復活しないのか……… (3)
1150042440.dat<>復活？ (5)
1150042488.dat<>家出をしようと思う (1)
1150042469.dat<>ﾆｺﾆｺ（´＾ω＾｀）ﾆｺﾆｺ (3)
1150042486.dat<>スクエニ垂れ流し　～気に入らないDJは叩こうぜ～ (1)
1150042485.dat<>復ッ活ッ (1)
1150042460.dat<>ｷﾀ━━━━━━(ﾟ∀ﾟ)━━━━━━ !!!!! (3)
1150042484.dat<>VIP復活記念大喜利 (1)
1150042483.dat<>V　I　P 始　ま　っ　た　な (1)
1150042482.dat<>自治スレッド (1)
1150042446.dat<>やほおおおお (2)
1150042479.dat<>　　　　ド　　ラ　　ゴ　　ン　　圧　　縮　　　 (1)
1150042478.dat<>　　　　　　　　　 (1)
1150042465.dat<>ばーか (3)
1150042477.dat<>おい！！！最速1000目指すぞｗｗｗｗｗｗｗｗ (1)
1150042429.dat<>ああああああああああああ (3)
1150042476.dat<>俺の空 (1)
1150042448.dat<>　　　　　　ド　ル　ビ　ー　サ　ラ　ウ　ド　ン (2)
1150042434.dat<>F1世界選手権第8戦イギリスグランプリ　 (2)
1150042467.dat<>なんもねーーーーーーーーｗｗｗｗｗｗｗｗ (1)
1150042463.dat<>ＦＦ語ろうぜ (1)
1150042458.dat<>きたおきたよ！！！１ (1)
1150042436.dat<>一番乗りｗ (2)

http://ex15.2ch.net/news4vip/subject.txt

200 OK

**ｒｅｆｆｉ@報告人 ★** · 2006/06/12(月) 01:18:41

>950
VIP復帰してきます～

**root▲ ★** · NG

確認しました。>>949

**ピロリ** · 2006/06/12(月) 01:18:55

ex15 は ok かな?

株価【800】 ▲ ◆cZfSunOs.U · 2006/06/12(月) 01:19:22

過去ログは......やはり過去ログ専用バックエンドを作ってそっちに分離ですかね．
で，そっちは手堅い設定にしておくと．過去ログにパフォーマンスはさほど必要ではないでしょうし．

**ｒｅｆｆｉ@報告人 ★** · 2006/06/12(月) 01:20:12

>954
復帰確認しました。

**ピロリ** · 2006/06/12(月) 01:20:42

んじゃ
ex15 は完了。

**root▲ ★** · NG

cobra2244 リモートコンソールつかめました。
作業入っています。

**root▲ ★** · NG

cobra2244 では、stable 版の mountd (NFS関連コマンド)を実行すると、
そこでカーネルパニックを起こしていることが判明。

**root▲ ★** · NG

カーネル・ユーザランドとも、6.1R の状態に戻すことに成功しました。

これから、NFS なしの状態に移行する作業します。

さきほどは mount (NFSのためのコマンド)でパニックしていました。
やはり NFS 周りは、FreeBSD では鬼門のようです。

サーバ部分から NFS を完全になしの状態にして、切り分けを実施。

news20b / live22 も NFS なしの状態に移行するため、
一度ずつ、リブート入れます。やる前には別途連絡予定。

**root▲ ★** · NG

>>960 の mount は、mountd ですね。

**root▲ ★** · NG

雪だるまフロント・バックとも、NFS の設定を消しました。
さようなら。FreeBSD ではもう二度と会うことはないでしょう。> NFS

**root▲ ★** · NG

…ということで、今日の復旧作業はほぼ終了という認識。

>>962 にああ書いたけど、しいてあげるなら、
NAS で使って、1台だけから mount するぐらいが「最大限の譲歩」ですかね。

少なくとも、複数サーバでファイルを共有する手段としては、
もう 2ch では金輪際、使うことはないかと。

**たにし ★** · 2006/06/12(月) 02:47:03

さようなら、

ということで実況関連板&なゅー速で
read.cgiの挙動がおかしかったり、●が使えない状況です。

次はこれをなんとかするということで、

**動け動けウゴウゴ２ちゃんねる** · 2006/06/12(月) 02:54:32

>>運営のみなさん
今週末は、お疲れ様でした。

**root▲ ★** · NG

現状の整理:

・NFS の設定は雪だるまから永久追放
・i386 アーキテクチャは、6.1-RC2 以上にすることでほぼ安定に動作
・amd64 アーキテクチャは、安定動作の確認まだとれず => 原因究明中
・過去ログ倉庫の参照機能が現在動作していない >>964

**動け動けウゴウゴ２ちゃんねる** · NG

>>962
> さようなら。FreeBSD ではもう二度と会うことはないでしょう。> NFS
何使ってるんすか？

**たにし ★** · 2006/06/12(月) 02:58:44

amd64 はフロント&バック
それぞれ一台ずつ投入されているんでしたっけ?

**動け動けウゴウゴ２ちゃんねる** · 2006/06/12(月) 02:59:08

明日がやべぇ・・・大丈夫なのだろうか？

**たにし ★** · 2006/06/12(月) 02:59:38

ちと覚悟はしておけ、

**root▲ ★** · NG

>>968
フロント: i386 5台(新tiger3台、旧tiger2台)
バック: i386 1台(live22)、amd64 2台(news20b, live23b)

**動け動けウゴウゴ２ちゃんねる** · 2006/06/12(月) 03:00:17

そういえばフロントのtigerも64bit試せますね

**root▲ ★** · NG

>>971
フロントのうち旧tiger1台は、現在 ex15 として臨時稼動中。

**root▲ ★** · NG

確かに新 tiger には、
その気になれば、amd64 と同じ 64bit OS を入れられます。(>>972 のとおり)

**たにし ★** · 2006/06/12(月) 03:06:25

現状フロントは安定していると思うので、何もしない。
ということで、

旧ex14(cobra2247?) が帰ってきたら、現ex15(tiger507)をフロントに戻して
フロント五台体制。

バック amd64 が安定しないようならバックは全部tigerにするとかがあるかもということで、
今のところ様子見かな、

**root▲ ★** · NG

>>975
了解です。そんなところですね。

現 ex14 = oyster901 ですね。
cobra2247 は news20b になりました。

**たにし ★** · 2006/06/12(月) 03:12:15

oyster901だった、、

そういえば oyster901 に付いているHDDはもう処分してもいい状態でしたっけ?
月曜日に新しいHD発注かかるんで到着と同時に付けてもいいか?
という質問なんです。

**root▲ ★** · NG

>>977
memories への収容は完了しているです。

**root▲ ★** · NG

ということで、装着OKと。

**たにし ★** · 2006/06/12(月) 03:14:04

りょうかいですー

**root▲ ★** · NG

ということで、73G HDD のレイアウトはこれで。

・単純に、/home と /var を大きくする
・他は従来の cobra 仕様と同一

da0 (73G)

/dev/da0s1a 256M /
/dev/da0s1d 4G /tmp
/dev/da0s1e 4G /usr
/dev/da0s1f 残り全部 /var

da1 (73G)

/dev/da1s1d 全部 /home

OS は、迷うところですが、
まずは今の oyster901 と同じ、FreeBSD 6.0R/amd64 でいこうかなと。

**root▲ ★** · NG

あ、スワップエリアを忘れました。修正版。

da0 (73G)

/dev/da0s1a 256M /
/dev/da0s1b 4G swap
/dev/da0s1d 4G /tmp
/dev/da0s1e 4G /usr
/dev/da0s1f 残り全部 /var

da1 (73G)

/dev/da1s1d 全部 /home

**root▲ ★** · NG

;live23b 確認します。

なんか、原因が別にあるような気もする。
あまりにも落ちすぎ。

**動け動けウゴウゴ２ちゃんねる** · 2006/06/12(月) 03:41:01

また実況が・・・・

**動け動けウゴウゴ２ちゃんねる** · 2006/06/12(月) 03:44:38

ひたすら落ちた時間のログ分析する鹿

**root▲ ★** · NG

CPU 0 が 51℃ で、CPU 1 が 49℃ みたい。
これは、どうなんだろう。

**ｒｅｆｆｉ@報告人 ★** · 2006/06/12(月) 03:46:10

>986
2度くらいなら測定誤差かと

**root▲ ★** · NG

まずは、single CPU のカーネルに換えます。

**root▲ ★** · NG

>>987
いや、高いとか低いとか。

**動け動けウゴウゴ２ちゃんねる** · 2006/06/12(月) 03:46:52

電気代ケチってエアコン消してないか？

**動け動けウゴウゴ２ちゃんねる** · 2006/06/12(月) 03:46:53

>>986
PCなら誤差の範囲だと思うけど鯖の場合はﾜｶﾝﾈ

**root▲ ★** · NG

single user で起動中。

5.4R は安定していたんだよなぁ。< ex12 / ex13
もう1年以上、リブートなし。

**root▲ ★** · NG

そう考えると、新しい機能を減らす方向かな。

mpsafevfs を殺そう。< live23b

**root▲ ★** · NG

%sysctl -a | grep mpsafe
debug.mpsafevfs: 0
debug.mpsafenet: 1
debug.mpsafevm: 1

**root▲ ★** · NG

原因の切り分けが必要ですね。

確かに「ハングアップ癖」はあったけど、ここまでではなかったような。
今度はもうさすがに伝家の宝刀「single CPU mode」だなと。

それでもだめなら、さすがにハードウェア方面を疑うしかないかなと。

**root▲ ★** · NG

個人的には、i-RAM とかは
ジンギスカンII にするのの代替(dat 部分だけ)というかんじに思うですね。

通常の動的なファイルは、通常ジンギスカンで特に問題ないので、
ライブな dat を置く場所、ぐらいですか。

HDD よりは高速だけど、メインメモリには劣ると。
というか SunOS さんも書いていますが、たぶんこれは「高速な HDD」ぐらいのしろものかなと。