2ch サーバーダウン（鯖落ち）情報　part195

**動け動けウゴウゴ２ちゃんねる** · NG

◆Pinkちゃんねる、まちBBS等は基本的にはここで扱いません。
　それぞれの運営系板に行ってください。
　　・pink秘密基地
　　　http://pie.bbspink.com/erobbs/
　　・会議室@まちBBS
　　　http://www.machi.to/tawara/

◆鯖落ち報告者が少ない時は自分の環境を疑ってみましょう。
◇ノートンを入れてる人はノートン系の使用を一時停止してみましょう。

◆サーバダウン(鯖落ち)情報の為のスレです。　
　　　2ch サーバーダウン（鯖落ち）情報　part194
　　　http://qb5.2ch.net/test/read.cgi/operate/1208876700/

◇サーバダウンの場合、「ページを表示できません」「サーバーが見つかりません」などと表示されます。
　これらのエラーメッセージではなく、別のページが表示される場合はサーバダウンではありません。

※ただ「重い」だけの場合はスレ違いです。以下のスレでお願いします。

　　　重い重い重い重い重い重い重い×53＠運用情報
　　　http://qb5.2ch.net/test/read.cgi/operate/1208599812/

◆書き込む前に過去ログや以下のサイトを見て状況を確認しましょう。
　 2ちゃんねるサーバ負荷監視所： http://ch2.ath.cx/
　 2ch鯖監視係。： http://sv2ch.baila6.jp/sv2ch01.html

※5分以上繋がらなかったら落ちているのかもしれません。それまでマターリ待ってみましょう。

◇同一鯖の別板でも似たような症状が出る場合は、鯖落ちの可能性が高いです。
　稼動中のサーバ一覧： http://mumumu.mu/serverlist.html

◆関連リンク
◇質問や雑談は質問・雑談スレでお願いします。　
　　　（流れが速いのでリンクは貼りません　「質問」でスレタイ検索してください）
◇ CGIや板の挙動等がおかしい時はこちらへ報告をお願いします。
　　　2ｃｈの動作報告はここで。パート24
　　　http://qb5.2ch.net/test/read.cgi/operate/1204187195/
◇新しい技術をテストしているかもしれないので、こちらもチェックしてみてください。
　　　2ch特化型サーバ・ロケーション構築作戦 Part28
　　　http://qb5.2ch.net/test/read.cgi/operate/1208685863/
◇サーバダウンを確認できたら、こちらをチェックしてみてください。
　　　避難所一覧
　　　http://kisekiwo.com/hinan/index.htm

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 09:49:43

書きこみできたー
乙でしたー

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 09:51:02

俺のカキコが消えて、1分後に書いた人に先越された('A`)

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 09:52:32

>>519
ウリもハン板に周知が出来なかったorz

**(=｀ー´=) ｸﾞﾍﾍ** ◆GuheheWiqY · 2008/05/04(日) 09:54:16

お疲れ様です

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 09:59:12

science6(doboku) 書き込みできますたー
おつですおつです

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 10:25:47

ガイドライン板新ドル

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 10:33:09

society6

**root▲▲ ★** · 2008/05/04(日) 10:33:29

ううむ、pingかからないですね。なんでだろう。
2.0 出します。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 10:36:47

academy6が落ちてる

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 10:47:00

science6上の板はダメなのかな？

**root▲▲ ★** · 2008/05/04(日) 10:48:13

上がった模様。

しばらく監視します。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 10:51:52

ガ板つながった

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 14:27:24

いまのところ、落ち着いてますねー

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 20:41:33

society6また落ちた？
三つくらい死んでる鯖が・・・

**(*ﾟ0ﾟ;;)** ◆T6Jkfyxt0. · 2008/05/04(日) 20:41:42

society6落ちた模様。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 20:42:06

http://society6.2ch.net/giin/

議員選挙板落ちたっぽいです

◆NAO/2MXDEk · 2008/05/04(日) 20:43:31

あらら、banana3108がコケてますね

◆NAO/2MXDEk · 2008/05/04(日) 20:44:55

いや、今は大丈夫そうですね。
瞬間的に負荷が上がっていた感じかな。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 20:47:19

やっぱ落ちたか

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 20:48:45

>>543
あなたを犯人です

**未承諾広告※** ◆TWARamEjuA · 2008/05/04(日) 20:55:28

でもリブートしたみたいですね。@3108

◆NAO/2MXDEk · 2008/05/04(日) 20:58:18

>>545
コケても立ち上がる子、なんちて

CPU 100% => 自力リブートなんですかね？

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 21:20:14

コンセント引っ掛けて抜いちゃったんだよ

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 21:28:45

市況板に荒らしがいるみたいなんですけど
同じスレいくつも立ててます

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 21:33:29

でっていう

2008/05/04(日) 21:58:02

カー寝るパニックですね。
詳細は帰宅後に。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 22:02:07

三ダース？

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 22:26:43

そんなに食えないって

**root▲▲ ★** · 2008/05/04(日) 23:08:53

Fatal trap 9: general protection fault while in kernel mode
cpuid = 1; apic id = 01
instruction pointer = 0x8:0xffffffff8043415d
stack pointer = 0x10:0xffffffffb209e8d0
frame pointer = 0x10:0xe9bf
code segment = base 0x0, limit 0xfffff, type 0x1b
= DPL 0, pres 1, long 1, def32 0, gran 1
processor eflags = interrupt enabled, resume, IOPL = 0
current process = 52089 (httpd)
trap number = 9
panic: general protection fault
cpuid = 1
Uptime: 9h57m54s
Physical memory: 4013 MB
Dumping 562 MB: 547 531 515 499 483 467 451 435 419 403 387 371 355 339 323 307 291 275 259 243 227 211 195 179 163 147 131 115 99 83 67 51 35 19 3
Dump complete
Automatic reboot in 15 seconds - press a key on the console to abort
Rebooting...

とのこと。

SCHED_4BSD のカーネルに入れ替えます。
これから一度リブートします。

**root▲▲ ★** · 2008/05/04(日) 23:11:02

リブート中、、、。数分で上がるはず。 < banana3108

**番犬 ★** · 2008/05/04(日) 23:11:13

落ちたー

と思ったら。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 23:12:06

>>553-554
告知する間もなかったですｗ

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 23:12:23

society6が落ちたみたいですね

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 23:13:14

science6 書き込みできますた
もう上がってきたのかな？

**root▲▲ ★** · 2008/05/04(日) 23:14:05

完了。>>554

**root▲▲ ★** · 2008/05/04(日) 23:14:25

>>555
すんませんですた。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 23:15:26

>>559
おつですおつです

>>560
犬だから放っておいて良いです

**番犬 ★** · 2008/05/04(日) 23:18:42

いやー
ただ見てるだけーだからどしどしお願いします　>>560

**root▲▲ ★** · 2008/05/04(日) 23:21:02

1日に2回落ちた(しかも負荷かかっていなくて)、
というのが気になるですね。

前と変えた所が2箇所で、1箇所元に戻しました(こっちはまだ「やばいかもなぁ」なやつ)。
これで安定してくれるといいんですが。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/04(日) 23:24:53

みーてーるーだーけー

>>563
安定するには時間がかかる、それは了解してます
じっくりゆっくり熟成してください
お疲れ様です

◆NAO/2MXDEk · 2008/05/04(日) 23:42:46

7.0Rで gjournal + SCHED_ULE => panic とかいう話を聞いたことがあるような

**未承諾広告※** ◆TWARamEjuA · 2008/05/05(月) 02:43:03

2008/05/05 02:20:00 LA= 2:20AM up 11 mins, 0 users, load averages: 0.30, 0.29, 0.19
2008/05/05 02:00:00 LA= 2:00AM up 2:48, 2 users, load averages: 0.29, 0.25, 0.25
またリブートしちゃったかも。。。

**root▲▲ ★** · 2008/05/05(月) 08:02:26

またカーネルパニックですね。

May 4 10:12:25 <0.2> banana3108 kernel: Fatal trap 12: page fault while in kernel mode
May 4 10:12:25 <0.2> banana3108 kernel: cpuid = 1; apic id = 01
May 4 10:12:25 <0.2> banana3108 kernel: fault virtual address = 0x114
May 4 10:12:25 <0.2> banana3108 kernel: fault code = supervisor read data, page not present
May 4 10:12:25 <0.2> banana3108 kernel: instruction pointer = 0x8:0xffffffff8042c502
May 4 10:12:25 <0.2> banana3108 kernel: stack pointer = 0x10:0xffffffffb1e28880
May 4 10:12:25 <0.2> banana3108 kernel: frame pointer = 0x10:0xffffff009cb04680
May 4 10:12:25 <0.2> banana3108 kernel: code segment = base 0x0, limit 0xfffff, type 0x1b
May 4 10:12:25 <0.2> banana3108 kernel: = DPL 0, pres 1, long 1, def32 0, gran 1
May 4 10:12:25 <0.2> banana3108 kernel: processor eflags = interrupt enabled, resume, IOPL = 0
May 4 10:12:25 <0.2> banana3108 kernel: current process = 1021 (httpd)
May 4 10:12:25 <0.2> banana3108 kernel: trap number = 12
May 4 10:12:25 <0.2> banana3108 kernel: panic: page fault
May 4 10:12:25 <0.2> banana3108 kernel: cpuid = 1
May 4 10:12:25 <0.2> banana3108 kernel: Uptime: 2h56m11s
May 4 10:12:25 <0.2> banana3108 kernel: Physical memory: 4013 MB
May 4 10:12:25 <0.2> banana3108 kernel: Dumping 570 MB: 555 539 523 507 491 475 459 443 427 411 395 379 363 347 331 315 299 283 267 251 235 219 203 187 171 155 139 123 107 91 75 59 43 27 11
May 4 10:12:25 <0.2> banana3108 kernel: Dump complete
May 4 10:12:25 <0.2> banana3108 kernel: Automatic reboot in 15 seconds - press a key on the console to abort
May 4 10:12:25 <0.2> banana3108 kernel: Rebooting...

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 08:08:03

OSの虫？機械の不具合？天狗？

**root▲▲ ★** · 2008/05/05(月) 08:35:04

>>568
調査中ですね、、、。

しかし gcc が変わったせいか、
make -j 4 buildworld buildkernel が 1 error で止まることが増えたような。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 08:47:08

やたら重いけど、落ちるのか？

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 08:51:54

確かに重いわ

**root▲▲ ★** · 2008/05/05(月) 08:53:10

システム作り直していたら、またカーネルパニックした、、、。

Fatal trap 12: page fault while in kernel mode
cpuid = 0; apic id = 00
fault virtual address = 0x0
fault code = supervisor write data, page not present
instruction pointer = 0x8:0xffffffff8030fbc5
stack pointer = 0x10:0xffffffffb2175670
frame pointer = 0x10:0xffffff00af16cd80
code segment = base 0x0, limit 0xfffff, type 0x1b
= DPL 0, pres 1, long 1, def32 0, gran 1
processor eflags = interrupt enabled, resume, IOPL = 0
current process = 57338 (make)
trap number = 12
panic: page fault
cpuid = 1
Uptime: 6h34m13s
Physical memory: 4013 MB
Dumping 559 MB: 544 528 512 496 480 464 448 432 416 400 384 368 352 336 320 304
288 272 256 240 224 208 192 176 160 144 128 112 96 80 64 48 32 16
Dump complete
Automatic reboot in 15 seconds - press a key on the console to abort
Rebooting...

**root▲▲ ★** · 2008/05/05(月) 08:54:53

例によって oyster901 で作ったカーネルに変えてみよう。

**root▲▲ ★** · 2008/05/05(月) 09:53:32

ということで、banana3108 一度リブートします。
数分で上がるはず。

**root▲▲ ★** · 2008/05/05(月) 09:54:01

…と思ったら、データ移動中にまた、、、。ううむ。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 09:58:40

ハングル

**root▲▲ ★** · 2008/05/05(月) 09:59:07

10:00まで待ってだめなら、リブート要請へと。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 09:59:14

society6

**root▲▲ ★** · 2008/05/05(月) 10:00:35

ping かかるようになった。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 10:00:40

ガイドラインが開けないお

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 10:01:00

司法板落ちてる？繋がらん

**名無しSUN** · 2008/05/05(月) 10:01:57

science6.落ちてます。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 10:02:33

文系繋がらない

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 10:02:48

回復してた

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 10:03:04

>>491見てなかったお

**582＠名無しSUN** · 2008/05/05(月) 10:03:10

あ、今、繋がった。＞science6

**root▲▲ ★** · 2008/05/05(月) 10:03:21

また、カーネルパニックですね。

May 4 16:47:44 <0.2> banana3108 kernel: Fatal trap 12: page fault while in kernel mode
May 4 16:47:44 <0.2> banana3108 kernel: cpuid = 0; apic id = 00
May 4 16:47:44 <0.2> banana3108 kernel: fault virtual address = 0x0
May 4 16:47:44 <0.2> banana3108 kernel: fault code = supervisor write data, page not present
May 4 16:47:44 <0.2> banana3108 kernel: instruction pointer = 0x8:0xffffffff8030fbc5
May 4 16:47:44 <0.2> banana3108 kernel: stack pointer = 0x10:0xffffffffb2175670
May 4 16:47:44 <0.2> banana3108 kernel: frame pointer = 0x10:0xffffff00af16cd80
May 4 16:47:44 <0.2> banana3108 kernel: code segment = base 0x0, limit 0xfffff, type 0x1b
May 4 16:47:44 <0.2> banana3108 kernel: = DPL 0, pres 1, long 1, def32 0, gran 1
May 4 16:47:44 <0.2> banana3108 kernel: processor eflags = interrupt enabled, resume, IOPL = 0
May 4 16:47:44 <0.2> banana3108 kernel: current process = 57338 (make)
May 4 16:47:44 <0.2> banana3108 kernel: trap number = 12
May 4 16:47:44 <0.2> banana3108 kernel: panic: page fault
May 4 16:47:44 <0.2> banana3108 kernel: cpuid = 1

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 10:04:55

makeでこけるって機械の不具合じゃまいか

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 10:04:57

>>587
ゆっくり、直してくださーい
できれば、７日の夜に、直ってればいいなぁ

**root▲▲ ★** · 2008/05/05(月) 10:05:00

カーネル入れ替え中、、、。

うまくいったら、緊急リブートします。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 10:05:28

>>583 繋がった

**root▲▲ ★** · 2008/05/05(月) 10:05:38

リブート中、、、。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 10:05:48

また駄目

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 10:06:46

ハングル

**root▲▲ ★** · 2008/05/05(月) 10:07:04

毎回
> instruction pointer = 0x8:0xffffffff8030fbc5

で落ちているから、ソフトウェアっぽいですね。

**root▲▲ ★** · 2008/05/05(月) 10:08:37

oyster901 で作った、

CPUTYPE=core2

なしのカーネルに入れ替えた。

これで、再度自分自身の生成のテストをしてみよう。

**root▲▲ ★** · 2008/05/05(月) 10:23:31

うーむ、、、。

またおかしくなった。

CPUTYPE=core2

なしのユーザランドに入れ替えないとだめか。

**582＠名無しSUN** · 2008/05/05(月) 10:24:22

science6.またつながらなくなりました。

**root▲▲ ★** · 2008/05/05(月) 10:26:41

10:30 まで待ってだめなら、リブート要請へと。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 10:28:30

意図的なものでしょ？

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 10:29:26

議員・選挙板は毎日サーバダウンで困る
＠携帯

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 10:30:31

ハングル落ちじゃねーんだよ

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 10:30:49

なったよ責任とれよ

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 10:32:06

　 |￣￣￣￣￣￣￣￣￣|
　 |　　ここで　　　　　　.|
　 |　エネマグラ挿入　　 .|
　 |＿＿＿＿＿＿＿＿＿|
　　　∧＿∧ ||
　　　(｀･ω･´).||
　　　 /　づ　Φ

**root▲▲ ★** · 2008/05/05(月) 10:32:33

要請出しました。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 10:35:07

ガ板落ちた
故郷を失って俺涙目

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 10:36:03

　 |￣￣￣￣￣￣￣￣￣|
　 |　　ここで　　　　　　.|
　 |　エネマグラ挿入　　 .|
　 |＿＿＿＿＿＿＿＿＿|
　　　∧＿∧ ||
　　　(｀･ω･´).||
　　　 /　づ　Φ

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 10:38:26

ガ板落ちてんの？

**root▲▲ ★** · 2008/05/05(月) 10:40:51

で、落ち方ですが、
今度はカーネルパニックではなく、ユーザランド側でおかしくなったっぽいので
(port 80つながるけどそのまま切れる、port 22ハングアップ等)なので、
やはり CPUTYPE=core2 が悪さをしていると予想。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 10:40:57

sociaty6鯖が落ちてる。ガ板にかぎらず。

**root▲▲ ★** · 2008/05/05(月) 10:42:08

で、oyster901 でユーザランドも作成しなおし中。

**root▲▲ ★** · 2008/05/05(月) 10:45:38

・game14 (FreeBSD 7.0R/amd64)の /bin/ls

$ sum /bin/ls
19888 29 /bin/ls

・oyster901 (FreeBSD 7.0R/amd64)の /bin/ls (私が作成しなおしたもの)

# sum /bin/ls
19888 29 /bin/ls

・banana3108 (FreeBSD 7.0R/amd64)の /bin/ls (CPUTYPE=core2 あり)

# sum /bin/ls
60243 29 /bin/ls

ということで、いったん全部作り直しが必要な予感。

すみませんが、しばらくしたら2時間ぐらい society6 / science6 / academy6 緊急に止めます。

**root▲▲ ★** · 2008/05/05(月) 10:47:17

で、個人的には gcc のバグか仕様変更なんじゃないかと予測、、、。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 10:51:02

　 |￣￣￣￣￣￣￣￣￣|
　 |　　ここで　　　　　.|
　 |　エネマグラ挿入　 .|
　 |＿＿＿＿＿＿＿＿＿|
　　　∧＿∧ ||
　　　(｀･ω･´).||
　　　 /　づ　Φ

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 10:51:07

自衛隊板落ちました。

**root▲▲ ★** · 2008/05/05(月) 10:53:25

現状のまとめ:

・CPUTYPE=core2 が指定されていると、64bit 環境では毒入りのバイナリができる模様。
・現在、カーネルについては別サーバからファイルをコピーし、毒を抜くのに成功。
・これから、カーネル以外の全バイナリの毒を抜く必要がある。

・ちなみにmaido3 なサーバでは、CPUTYPE=core2 に加え、
CFLAGS= -O -pipe
COPTFLAGS= -O -pipe
も同時に指定されていたため、
オプティマイズがデフォルトの -O2 から一段階「手加減」されていて、
かつ、カーネル以外は作り直していないので、たまたま被害を免れた模様。

ということで、gcc のバグか仕様変更なのではないかと推測。

ちなみに CPUTYPE=core2 をつけると、
-march=nocona というオプションが gcc に付加される模様。

**root▲▲ ★** · 2008/05/05(月) 10:55:11

ということでこれからやるのは、

> ・これから、カーネル以外の全バイナリの毒を抜く必要がある。

この作業になります。
カーネル以外の全のバイナリの再コンパイルと再インストール。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 10:55:52

原因特定と作業乙乙

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 11:00:06

>>606 >>608
直った。

**root▲▲ ★** · 2008/05/05(月) 11:02:31

で、現在、毒なしの / や /usr を oyster901 で作成中。
できたら、/usr/obj をコピーしてインストール → リブート

この時点でいったん、science6 / society6 / academy6 のサービス停止します。
で、httpd 等全消去、再インストールをします。

できるだけ急いで、2時間ぐらいでやろうと思いますが、
不測の事態が発生すると、もう少しかかるかもです。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 11:12:44

>>620
どうぞ、ごゆるりと・・・

**root▲▲ ★** · 2008/05/05(月) 11:40:00

ということで準備できたので、これから作業入ります。
2時間ぐらいサーバ止まります。

**root▲▲ ★** · 2008/05/05(月) 11:45:53

>>622
oyster901 で作成した毒なしユーザランドをインストール、
リブート中、、、。

**root▲▲ ★** · 2008/05/05(月) 11:54:48

>>623
うまく上がりました。

これから、
> で、httpd 等全消去、再インストールをします。

に入ります。
その間該当サーバ・板はサービス停止状態となりますです。

2ch サーバーダウン（鯖落ち）情報 part195

2ch サーバーダウン（鯖落ち）情報　part195