【ex10】FreeBSD 6.0R性能評価実験に伴うサーバダウンについて

**root▲ ★** · NG

サーバダウン(鯖落ち）情報　part81
http://qb5.2ch.net/test/read.cgi/operate/1129187861/54

ということで、FreeBSD 6.0R (正確には現在まだ6.0-RC1:
正式リリース一歩手前)の性能評価実験のため、
oyster901 = ex10サーバを、2005年10月15日 2:30ごろからしばらく落とします。

作業が問題なくいった場合、最大2時間～3時間程度で復活の予定です。
作業状況は、逐次このスレッドに書いていきます。

なお今後、FreeBSD 6.0Rが正式リリースされるまでに、
RC版の更新バージョンが数回リリースされる可能性がありますが、
たぶんその回数分、つまり正式リリースとなるまでの間の数回、
システムの更新を行う可能性が高いです。

それらの更新は更新内容にもよりますが、
2時間ではなく、10分～数10分程度となる予定です。

いずれにせよ、oyster901という実験機にいる宿命ということで、
現在ex10に入っている campus および keiba 板の方々におかれましては、
ご理解のほど、何卒よろしくお願いいたします。

**動け動けウゴウゴ２ちゃんねる** · 2005/10/15(土) 04:05:38

>>43
ありがとうございます。
うちもその手で自動化することにします。

**root▲ ★** · NG

ports関係は、もっとかしこいやり方(portupgradeとかその他もろもろのports関係のツール)が
あると思うです。

amd64で更新するの、これがはじめてだったりするので。>>44

**動け動けウゴウゴ２ちゃんねる** · 2005/10/15(土) 04:13:28

作業中に雑談する暇あるならさっさと終わらして早めに復帰させてくれ

**root▲ ★** · NG

/usr/ports/www/p5-CGI-SpeedyCGI
/usr/ports/sysutils/p5-Sys-CpuLoad
/usr/ports/net/p5-Net-CIDR-Lite

portsからインストール

**root▲ ★** · NG

>>46
終盤に入りました。特に問題なければ、当初予定通り4:30あたりには。

**root▲ ★** · NG

/usr/ports/japanese/p5-Jcode

インストール(bbs.cgi等で使用)

**root▲ ★** · NG

ジンギスカン(メモリディスク)を、ex11と同じmalloc+asyncに変更。

**root▲ ★** · NG

mod_cgidso をインストール

**root▲ ★** · NG

PV取得用logbufferプログラムをインストール

**動け動けウゴウゴ２ちゃんねる** · 2005/10/15(土) 04:24:47

ジンギスカンの味はどうですか？

**root▲ ★** · NG

read.cgi を更新(FreeBSD 6.0用バイナリ)
# FreeBSD 5.x用バイナリでも動くはずだが、効率を考慮

**root▲ ★** · NG

offlaw.cgiは、とりあえず今のもの(FreeBSD 5.xバイナリ)を使用。
たぶん、動くかと。

**root▲ ★** · NG

お祈り
最終リブートテスト

**root▲ ★** · NG

>>53
ex11でいい味だったので、たぶんいけるんではないかと。

**root▲ ★** · NG

pingきたー。

**動け動けウゴウゴ２ちゃんねる** · 2005/10/15(土) 04:31:45

きたー？

**root▲ ★** · NG

システムメッセージを確認(dmesg)
/md が自動でmountされたこと & 容量・iノード量・モードが問題ないことを確認

**root▲ ★** · NG

メモリディスクの内容を復元

**root▲ ★** · NG

httpdを自動起動するように設定

全作業完了したので、これからhttpdを動かします。

・見れたか
・書き込めたか

確認できたら、ここに報告くださいです。

◆Reffi/bQ.c · 2005/10/15(土) 04:35:47

大学生活にて専ブラ読み込み及び正常書き込み確認しました。

**動け動けウゴウゴ２ちゃんねる** · 2005/10/15(土) 04:35:51

OKです、見られました。書き込めました。

**動け動けウゴウゴ２ちゃんねる** · 2005/10/15(土) 04:35:53

>>62
競馬板ｵｯｹｰ☆⌒d(´∀｀)ノ

**root▲ ★** · NG

keiba 表示、read.cgi読み込み、bbs.cgi書き込み問題なさげ。

**root▲ ★** · NG

>>63-65
どもです。
過去ログはいかが。

**root▲ ★** · NG

keiba で適当に見てみましたが、過去ログ(offlaw.cgi)も大丈夫そうですね。

しばらく、サーバの様子を観察するです。

**動け動けウゴウゴ２ちゃんねる** · 2005/10/15(土) 04:39:24

大学生活板読み込み書き込みおｋです
過去ログは●持ってないんでなんとも（’A`;

**root▲ ★** · NG

しばらく見ていましたが、異常なさそうですね。

news4vipが来るかもしれないので、/md の大きさは ex11 と同じだけとってあります。
いつでも、移転可能かと。

ただ、>>1 にも書いたように、
今度数回程度サーバの計画的ダウン&作業が予想されてますので、
それ以降のほうがいいかもです。

ということで本日の作業は、ここまで。

**動け動けウゴウゴ２ちゃんねる** · 2005/10/15(土) 04:56:27

乙でしたー

◆TWARamEjuA · NG

makeをbgに回してパラでやっちゃうとどうなるんだろう？
$ make なんたら/ > /dev/null & \
$ make かんたら/ > /dev/null & \
みたいな。。。
（make過程を捨てちゃダメダメ。。。）

**root▲ ★** · 2005/10/15(土) 09:54:26

>>72
確実に全部makeが通るなら、それでもよいのかも。

M ◆adGyIb9mrY · 2005/10/15(土) 11:57:29

rootさん深夜の作業本当にお疲れ様でした。
競馬板自治にお越しいただいてありがとうございました。
風邪など召されません様、御身体御自愛なさって下さい。

**root▲ ★** · 2005/10/17(月) 16:30:18

ex10、メモリディスクを sortupdate ありのモードに変更します。
これから数分、httpd止めます。

**root▲ ★** · 2005/10/17(月) 16:33:58

>>75 作業終了。

今日は夜遅くまで本業につき。
news4vip の ex10 への移転は、頃合いをみてぼちぼちという感じで。

**動け動けウゴウゴ２ちゃんねる** · 2005/10/17(月) 18:12:00

ＶＩＰ移動？

**動け動けウゴウゴ２ちゃんねる** · 2005/10/17(月) 18:13:20

ｈｔｍｌすらできない俺が手伝いにきました＾－＾

**動け動けウゴウゴ２ちゃんねる** · 2005/10/17(月) 18:13:55

簡単なCGIまでならできる俺がVIPからきました

**動け動けウゴウゴ２ちゃんねる** · 2005/10/17(月) 18:20:48

なぜ狼じゃなくてVIPが移転？？？

**動け動けウゴウゴ２ちゃんねる** · 2005/10/17(月) 18:39:29

>>78 >>80
…ちょっとは調べてから書き込もうな。

★☆★【娘。】モー狼板運用情報【狼】17☆★☆
http://qb5.2ch.net/test/read.cgi/operate/1128664855/

186 名前：名無し募集中。。。投稿日：2005/10/07(金) 16:49:19 ID:U2/srnQS0
じゃあVIPをex10に移転しちゃえよ
あいつら保全するような連スレ無いから500でも問題ないだろ

190 名前：FAX ★ 投稿日：2005/10/07(金) 16:50:21 ID:???0
>>186
そうすると言ってるだろが。。。

265 名前：FAX ★ 投稿日：2005/10/07(金) 17:06:57 ID:???0
狼はどっちでもいいのよ、好きなほうで、

決定事項は vip移転ex11->ex10 大きな入れ物にいれる、
だから ex10 500, ex11 700 にdat保持数変更
ex10はdatもRAMジンギスカンに変更

campus , keiba は ex10に居残り、苦しんでください(dat保持数減等もろもろ)

…苦しんで下さい、だとさ。

**動け動けウゴウゴ２ちゃんねる** · 2005/10/17(月) 18:49:07

だったらスレ立て放題に戻してくれ・・・

**動け動けウゴウゴ２ちゃんねる** · NG

ヒント：懲罰鯖

**動け動けウゴウゴ２ちゃんねる** · 2005/10/17(月) 19:01:52

さすがＦＡＸ様

**動け動けウゴウゴ２ちゃんねる** · 2005/10/17(月) 19:19:41

のんびり値　90秒にしてみるとかないかね

**boot** ◆Supportfwc · 2005/10/17(月) 21:40:10

>>40
2.0.55ですか。。。
うへ？55出たんですか。
ちょっと公式ページ見てきまふ。。

**root▲ ★** · 2005/10/17(月) 23:15:37

というわけで2ch最大規模の板が移転し、本格的な耐久試験が始まりました。

たぶんあと何回か、システム更新がある予感。

**動け動けウゴウゴ２ちゃんねる** · 2005/10/17(月) 23:23:40

ex10の試験が終わったらVIPがex11に戻る予感

**動け動けウゴウゴ２ちゃんねる** · 2005/10/17(月) 23:31:51

予想の斜め上を行ってex10炎上して新鯖が……ねーよ('A`)

**動け動けウゴウゴ２ちゃんねる** · 2005/10/17(月) 23:33:56

VIPだけじゃなくて、ex11=懲罰鯖　になり、すべて移転じゃねーの？

**動け動けウゴウゴ２ちゃんねる** · 2005/10/18(火) 01:44:08

>>86
そんな事より何で1.3.34が消えたんだ？
http://httpd.apache.org/
http://72.14.203.104/search?q=cache:WMhvY2s76bQJ:httpd.apache.org/download.cgi+apache+1.3.34&hl=ja&ie=UTF-8&inlang=ja

**root▲ ★** · NG

サーバダウン(鯖落ち）情報　part81
http://qb5.2ch.net/test/read.cgi/operate/1129187861/216

216 名前：root▲ ★[sage] 投稿日：2005/10/19(水) 23:58:03 ID:???0 ?###
カーネルパニックで死んだのか。

oyster901# savecore
savecore: reboot after panic: page fault
savecore: writing core to vmcore.0

以降は、FreeBSD 6.0Rのスレで作業しよう。

**動け動けウゴウゴ２ちゃんねる** · 2005/10/20(木) 00:00:02

ふむ、到着。

**root▲ ★** · NG

カーネルを最新に更新するです。

ちょっと、作業するね。
たぶん30分ぐらい。

ライブだったdatは、あぼーんということで。

**root▲ ★** · NG

そんで、bbs.cgi 止めています。
書けない状態。

**動け動けウゴウゴ２ちゃんねる** · 2005/10/20(木) 00:02:52

＞　ライブだったdatは、あぼーんということで。

ｶﾞ━━━(ﾟДﾟ;)━(　ﾟД)━(　　ﾟ)━(　　 )━(ﾟ;　 )━(Дﾟ; )━(ﾟДﾟ;)━━━ﾝ!!!!!

**動け動けウゴウゴ２ちゃんねる** · 2005/10/20(木) 00:03:26

馴れ合いpartスレ完全消滅ｷﾀｰ！

乙！

**root▲ ★** · NG

make update してカーネルを make 中。
クラッシュダンプはとれたので、後で原因を解析可能。

ここからは復旧作業なので、サーバダウンスレで作業するです。
ここは記録目的で。

**動け動けウゴウゴ２ちゃんねる** · 2005/10/20(木) 00:07:30

root様乙であります！

**動け動けウゴウゴ２ちゃんねる** · 2005/10/20(木) 00:07:37

おつかれさまだす。

**動け動けウゴウゴ２ちゃんねる** · 2005/10/20(木) 00:08:00

>>96
落ちる前の？
落ちた後の？
両方？

**動け動けウゴウゴ２ちゃんねる** · 2005/10/20(木) 00:08:23

>>98
おー何が出るかな

◆BOX/05.... · NG

>>96
よかったね

2005/10/20(木) 00:12:15

GENERICならfreebsd-update使えYO!

**動け動けウゴウゴ２ちゃんねる** · 2005/10/20(木) 00:12:15

rootﾀﾝ乙

**動け動けウゴウゴ２ちゃんねる** · 2005/10/20(木) 00:13:20

partｽﾚあぼーんﾊﾞﾝｼﾞｬｰｨ∩(･ω･)∩

**動け動けウゴウゴ２ちゃんねる** · 2005/10/20(木) 00:13:28

真っ白なキャンパス。
希望を描くか絶望を描くか。

**動け動けウゴウゴ２ちゃんねる** · 2005/10/20(木) 00:13:36

ﾊﾞﾝｼﾞｬｰｨ∩(･ω･)∩

**動け動けウゴウゴ２ちゃんねる** · 2005/10/20(木) 00:14:12

乙とかはサーバダウンスレへ移動してください
サーバダウン(鯖落ち）情報　part81
http://qb5.2ch.net/test/read.cgi/operate/1129187861/

**MUMUMU** ◆EKmvabCDDM · 2005/10/20(木) 00:15:12

ex自体に問題があるかもです。

**動け動けウゴウゴ２ちゃんねる** · 2005/10/20(木) 00:16:25

再起動してみるのがよし

**動け動けウゴウゴ２ちゃんねる** · 2005/10/20(木) 00:17:28

おｋです
書き込み成功しました

**動け動けウゴウゴ２ちゃんねる** · 2005/10/20(木) 00:17:37

http://sports2.2ch.net/test/read.cgi/operatex/1114132963/

999 名前：動け動けウゴウゴ２ちゃんねる[] 投稿日：05/10/20(木) 00:15 ID:UoXsVhFM
999
douzo

1000 名前：動け動けウゴウゴ２ちゃんねる[] 投稿日：05/10/20(木) 00:15 ID:cqNm9dys
1000だったらVIP消滅

キタコレｗ

**動け動けウゴウゴ２ちゃんねる** · 2005/10/20(木) 00:18:19

書き込み完了。
過去ログおｋ

**root▲ ★** · NG

んと、ここは原因究明とかの作業に使いたいんで、
すんませんがサーバダウンスレとかvip運用情報スレとかに、
行っていただけると助かるです。

**動け動けウゴウゴ２ちゃんねる** · 2005/10/20(木) 00:24:29

なんだ落ちてると思ったら内部入れ替えか

**root▲ ★** · NG

%kgdb /boot/kernel.old/kernel vmcore.0
[GDB will not be able to debug user-mode threads: /usr/lib/libthread_db.so: Undefined symbol "ps_pglobal_lookup"]
GNU gdb 6.1.1 [FreeBSD]
Copyright 2004 Free Software Foundation, Inc.
GDB is free software, covered by the GNU General Public License, and you are
welcome to change it and/or distribute copies of it under certain conditions.
Type "show copying" to see the conditions.
There is absolutely no warranty for GDB. Type "show warranty" for details.
This GDB was configured as "amd64-marcel-freebsd".
(no debugging symbols found)...Attempt to extract a component of a value that is not a structure pointer.
(kgdb) where
#0 0xffffffff8026c83d in doadump ()
Cannot access memory at address 0xffffffffece415c8

うーむ。

**動け動けウゴウゴ２ちゃんねる** · 2005/10/20(木) 01:05:21

工エｴェｪ（´д｀）ｪェｴエ工

**root▲ ★** · NG

ほんで、

calcru: runtime went backwards from 122068 usec to 122026 usec for pid 24240 (httpd)
calcru: runtime went backwards from 126839 usec to 126834 usec for pid 24240 (httpd)
calcru: runtime went backwards from 126839 usec to 126834 usec for pid 24240 (httpd)
calcru: runtime went backwards from 126839 usec to 126834 usec for pid 24240 (httpd)
calcru: runtime went backwards from 126839 usec to 126834 usec for pid 24240 (httpd)

ってのが、たくさん出ているです(これは6.0-RC1にしてからずっと)。

ソースを grep してみると、/usr/src/sys/sys/kern_resource.c で、
5.4Rのやつ (1.143) から diff とってみると (1.148) 、
まさに変わったところのようで。

**root▲ ★** · NG

これか。
http://www.freebsd.org/cgi/cvsweb.cgi/src/sys/kern/kern_resource.c?rev=1.146&content-type=text/x-cvsweb-markup
http://www.freebsd.org/cgi/cvsweb.cgi/src/sys/kern/kern_resource.c.diff?r1=1.145&r2=1.146

これがpanicの原因かどうかはわからんけど、
前と変わっていることには、かわりないなぁ。

**root▲ ★** · NG

ざっと読んでみると、マルチCPUでマルチスレッドの時っつーか、
別CPUが実行した分も含めて、
calcruをちゃんと計算できるようにした、ってことっぽいなぁ。

んで、それがぼみょーにばぐってるってゆうことなのかしら。

**動け動けウゴウゴ２ちゃんねる** · 2005/10/20(木) 13:18:56

あげます

**動け動けウゴウゴ２ちゃんねる** · 2005/10/20(木) 17:30:10

あげなくていいよ馬鹿

**root▲ ★** · 2005/10/20(木) 21:52:25

どうもF22がうまく動いてなかったらしく、どんどん/mdの下のdatがふくらんでいっていたらしい。
でもそれでpanicしちゃ、いまいちかも。

とりあえずなおしたので、実験は継続ということで。

**root▲ ★** · NG

epg.2ch.net も FreeBSD 6.0-RC1 にした。
厳密には別件だけど、PHP5 の虫を踏んだっぽいので、とりあえずメモ。

出ていたエラー:
PHP Fatal error: Cannot re-assign $this ...

■ テレビ番組欄＠2ch をつくろう第3話
http://qb5.2ch.net/test/read.cgi/operate/1122520338/249

249 名前：root▲ ★[sage] 投稿日：2005/10/24(月) 03:23:18 ID:???0 ?###
むーん、

http://bugs.php.net/bug.php?id=34358

これを、踏んだ模様。
困ったな。

とりあえず、PHPを4.xに戻そう。
いったん落とします。

**動け動けウゴウゴ２ちゃんねる** · 2005/10/24(月) 16:04:57

肝心なところでPHPはだめだなあ。

**root▲ ★** · NG

数日以内に、6.0R正式版のアナウンスが出る気配となりました。
出たところで、現在 6.0R で動いている ex10 と epg のバージョンアップを実施するです。
作業時には、一度30分～最大1時間程度 ex10 が止まります。

ex10 でのランニングテストで概ね問題なさげだったので
(一度だけF22の不具合を直す前にpanicしましたが)、
雪だるまシステムは最初からすべて、6.0R で動かそうかと。

**root▲ ★** · NG

>>127
× 現在 6.0R で動いている
○ 現在 6.0-RC1 で動いている

**root▲ ★** · 2005/11/05(土) 16:13:12

正式アナウンスが出たので、今日深夜あたりに6.0Rへの更新作業をしようかなと。
作業中は、ex10止まります。

特に問題が出なければ、ダウンタイムは15分程度の予定。

**root▲ ★** · 2005/11/06(日) 00:25:20

ほんじゃ、今日 1:00 から >>129 はじめるです。
サーバダウンスレにも、予告出してくるか。

**動け動けウゴウゴ２ちゃんねる** · 2005/11/06(日) 01:01:48

始まった？

**動け動けウゴウゴ２ちゃんねる** · 2005/11/06(日) 01:02:36

っぽいかな？
【待機します。】

**動け動けウゴウゴ２ちゃんねる** · 2005/11/06(日) 01:06:00

鯖ｵﾜﾀ

青玉 ◆cEc2P5uewI · 2005/11/06(日) 01:18:04

鬼面カキコ

**動け動けウゴウゴ２ちゃんねる** · 2005/11/06(日) 01:18:20

　　∧＿∧ 　+
　（0゜・∀・）　　　ﾜｸﾜｸﾃｶﾃｶ
　（0゜∪ ∪ +
　と＿_）__）　+ 　　

**root▲ ★** · 2005/11/06(日) 01:20:49

バージョンアップ作業は無事終了しました。

%uname -a
FreeBSD oyster901.maido3.com 6.0-RELEASE FreeBSD 6.0-RELEASE #0: Sat Nov 5 00:11:56 PST 2005 root@oyster901.maido3.com:/usr/obj/usr/src/sys/AMD64_COBRA_60 amd64

**動け動けウゴウゴ２ちゃんねる** · 2005/11/06(日) 01:23:32

寝るﾉｼ

**root▲ ★** · 2005/11/06(日) 01:42:39

で、いくつかのサーバを6.0-RC1や6.0Rに上げたので、使用感を。

ログインしていくつかコマンド打ってディスク触ってまず、「軽い」と感じますね。
特にファイルシステム周りというか、ディスクをがりがり触る系のオペレーションでは、
明らかにそう感じます。

例えば、makeしながら他のことする時とかの、「ひっかかり感」が
明らかに軽減されたような気がするです。

ex10が問題なく動くようなら、次は思い切ってBG3/BG4をやってみるかな。

**動け動けウゴウゴ２ちゃんねる** · 2005/11/06(日) 02:44:12

>138
ディスク関係は軽くなったってみんな言ってますね。
俺も 6.1 ぐらいになったら入れるかな…

**root▲ ★** · NG

そろそろ、live20を6.0Rにしようと思うわけですが、
今夜やるとしたら、いつごろからがいいのかしら。

所要時間は、2～3時間ぐらい。

**動け動けウゴウゴ２ちゃんねる** · NG

TRICK・各種バラエティの終わる0時頃と言ってみる
後ろにずれ込む分には多少遅くなったところで問題はないかと。

**動け動けウゴウゴ２ちゃんねる** · 2005/11/13(日) 22:35:39

へえ、２ｃｈもFreeBSDなんだ

**root▲ ★** · NG

>>141
そんなところですか。

んじゃ、0:30 あたりからにしますか。