X
トップページ⇒運用情報
215コメント48KB

【 MACKEREL HAS BEEN DOWN 】リブート部隊連絡所 -- Count 01

■ このスレッドは過去ログ倉庫に格納されています
0001動け動けウゴウゴ２ちゃんねる
垢版 |
04/07/06 22:03ID:bBAEwpv9
サーバが落ちたときにの連絡用として。＠サーバダウン情報スレが機能していないため。

● 落ちた？
・内部作業によるダウンかを確認。
→作業前にでもこのスレッドでその旨を宣言して貰えるとありがたい。

・経路を調べる。traceroute 鯖名 (*nix,MacOSX) | tracert 鯖名 (WIN)
　※経路中途が断の時もある。
　もし２ちゃんねる鯖に入れる環境であるならば、そこからも経路を調べる。

・経路障害が無くともサービスが止まっている場合もある。
　※他のサービスをあたってみる。
　ssh 鯖名 → 鯖鍵がなければ問われるのでそれで確認が出来る。
　ftp 鯖名 → アカウントが無くとも、入ることだけなら可能。
　など。
　smtp pop3 は、ほとんどの鯖で動いていない。

● サーバダウンが確認が出来たら？
・要請を出す。
　他の人が出していないかをチェック。
　内容は英文で簡潔に。余計な情報は流さない。

★ サーバダウンチェッカ
　10 分間、サーバから httpd のレスポンスが無いときに限りメール発射する装置が「2ch 鯖監視係。」にあります。
　ご入り用でしたら下記まで。要送信先メールアドレス。
　mishowdaq-ad@correo.baila6.jp
0104root▲ ★
垢版 |
04/10/18 13:34:50ID:???
また902=memories おかしい模様。
前回と同じ症状？pingかかる、sshつながる、でも応答ない、httpd応答ない

とりあえずリブート要請します。
上がったらようすみてみます。
0105root▲ ★
垢版 |
04/10/18 14:36:23ID:???
902がむずがっている原因の一つは、/etc/resolv.conf の設定に問題があったための模様。
他にも調整事項ある模様。再度リブート中。
0106root▲ ★
垢版 |
04/10/18 15:04:09ID:???
902の以降の報告はpekoサーバスレで。
0108root▲ ★
垢版 |
04/10/25 22:16:05ID:???
oyster901 = live8 リブート要請しました。
上がったら、Apacheのセッティングを見直す予定。
0109root▲ ★
垢版 |
04/10/25 22:20:35ID:???
ex7。まあ、これ以上bbs.cgi(perl)が起動してもらっちゃ困るし。

%ps ax | grep perl | wc -l
92
%ps ax | grep perl | wc -l
89
0111root▲ ★
垢版 |
04/11/05 00:50:23ID:???
tiger503 = ex7 リブート要請出しました。
0112root▲ ★
垢版 |
04/11/10 13:29:23ID:???
cobra2244 リブート要請しました。
ううむ、、、。
0113root▲ ★
垢版 |
04/11/14 23:22:48ID:???
oyster901 (live8)
tiger503 (ex7)
リブート要請済み。
0114root▲ ★
垢版 |
04/11/15 21:15:07ID:???
oyster901 リブート要請しました。
0115root▲ ★
垢版 |
04/11/18 21:41:52ID:???
cobra2244 = c-docomo4 リブート要請しました。
0116さぼてん ★
垢版 |
04/12/06 11:50:41ID:???
事後になるけど、

oyster243 リブート要請しましたー ＞ 対応されました。
お疲れ様でした。
0117未承諾広告※ ◆TWARamEjuA
垢版 |
04/12/19 20:06:26ID:daFSROrG
oyster243.peko.2ch.net[206.223.151.220] has been down.
って事でりぶぅと要請を出しました。
しかし現地は日曜日の夜明け前なので、復旧には多少のお時間をいただくかもしれませんですm(_ _)m
0118動け動けウゴウゴ２ちゃんねる
垢版 |
04/12/19 20:24:28ID:P4eEDY5l
俺の童貞ペニスにもリブート要請かけてください
0121動け動けウゴウゴ２ちゃんねる
垢版 |
04/12/19 21:50:30ID:EQSvQrNO
836 名前：root▲ ★ 投稿日：04/12/19 21:07:06 ID:???
実家に戻りました。
とりあえずlive16はBBQを引かないように緊急対策。

926 名前：root▲ ★ 投稿日：04/12/19 21:19:51 ID:???
tigerサーバ緊急対策完了。
該当するのは以下。
ex7.2ch.net game10.2ch.net news18.2ch.net
game9.2ch.net dso.2ch.net live16.2ch.net
life7.2ch.net news19.2ch.net hobby7.2ch.net

935 名前：root▲ ★ 投稿日：04/12/19 21:21:19 ID:???
cobraサーバ完了。
live8.2ch.net

952 名前：root▲ ★ 投稿日：04/12/19 21:23:27 ID:???
あとのサーバは、、、DNSキャッシュを自分で持ってない & 私がroot権限を持ってないので、
緊急対応にはやや時間を要する見込み。
とりあえず、他の状況を確認してきます。

51 名前：root▲ ★ 投稿日：04/12/19 21:41:16 ID:???
oyster243、pingかからないですね。リモートコンソールも応答ない模様。
oyster243以外は、動いてるのかな。
oyster243のリブート依頼は既に出ていますね。未承諾広告※さんか。
まだリブートはされていないと。
で、現地は日曜の朝4時半か。
…しかし前回の事件があって、
ここ(dnscache/BBQ)を強化すべく活動しはじめてた矢先にこれか。
0122さぼてん ★
垢版 |
04/12/23 13:43:20ID:???
cobra2247 = c-docomo, c-docomo2 リブート要請しましたです。
0123さぼてん ★
垢版 |
05/01/01 21:13:54ID:???
ばーべきゅー(oyster243) また調子悪いみたいね、、
とりあえず新年一発目のメール送っておきましたです。。(m_ _)m
0124root▲ ★
垢版 |
05/01/03 16:38:42ID:???
tiger509 = news19 リブート依頼しました。
0125root▲ ★
垢版 |
05/01/09 22:25:14ID:???
tiger504 = game10
tiger510 = hobby7
リブート要請しました。
0126root▲ ★
垢版 |
05/01/11 21:36:28ID:???
oyster243 = BBQ
リブート要請しました。
0127root▲ ★
垢版 |
05/01/14 11:35:41ID:???
banana307 = BBM
リブート要請しました。
0128root▲ ★
垢版 |
05/01/14 13:12:31ID:???
cobra2246 = c-docomo3
リブート要請しました。
0129root▲ ★
垢版 |
05/01/19 13:13:29ID:???
tige503 = ex7
リブート要請しました。
0130root▲ ★
垢版 |
05/01/21 21:26:43ID:???0
tige503 = ex7
リブート要請しました。ううむ。
0131root▲ ★
垢版 |
05/01/22 16:14:57ID:???0
oyster243 = bbq
リブート要請しました。
0132動け動けウゴウゴ２ちゃんねる
垢版 |
05/01/26 21:17:11ID:hHPnEvE10
Pinging bbq.2ch.net [206.223.151.220] with 32 bytes of data:

Request timed out.
Request timed out.
Request timed out.
Request timed out.

Ping statistics for 206.223.151.220:
Packets: Sent = 4, Received = 0, Lost = 4 (100% loss),
0133未承諾広告※ ◆TWARamEjuA
垢版 |
05/01/26 22:35:26ID:IWDbSLib0
>>132
oyster243 = bbq = [206.223.151.220]
リブート要請しました。

よく墜ちるよなぁ、、、
0134root▲ ★
垢版 |
05/01/26 23:01:50ID:???0
>>133
5.2.1R時代(ずっと安定していた)と比べて変えているのは、
メモリディスクを他のサーバよりもかなり大きくとって、
そこにBBQとdnscache関連のDNSデータとログを入れるようにしたことですね。
それ以外は変えていないので、そこに原因があるのはほぼ間違いなさげです。

cobra2245への切り替え作業を急ぎます。
0135root▲ ★
垢版 |
05/01/26 23:03:18ID:???0
banaa272は、dnscacheの向きを変えていないのかも。とここにメモ。
0137root▲ ★
垢版 |
05/01/27 14:27:05ID:???0
oyster243 リブート要請しました。

上がったら、メモリディスクの利用を一時的に中断します。
0138未承諾広告※ ◆TWARamEjuA
垢版 |
05/01/30 10:06:23ID:XYRaA0uV0
memories(oyster902)[206.223.151.230]
のリブート要請をしました。

Date: Sun Jan 30 09:26:11 2005 JST-9 (Sat Jan 29 16:26:11 2005 PST+8PDT)
Target: oyster902.peko.2ch.net[memories.2ch.net] 206.223.151.230
0139未承諾広告※ ◆TWARamEjuA
垢版 |
05/01/30 19:21:01ID:XYRaA0uV0
>>138
うぅむ、、、過負荷が掛かっていただけで墜ちてはいなかったもより。。。
でもってリブートされてから戻ってこないもより（汗）
多少時間が掛かるんでしたっけ？
0140root▲ ★
垢版 |
05/01/30 20:34:19ID:???0
>>139
oyster902はリブートに時間かかるです。

様子そのものも、確かに変な模様。
0142root▲ ★
垢版 |
05/01/30 23:32:01ID:???0
>>141
だいたい、2時間半近くかかる模様です。
ﾏﾀｰﾘ待つが吉かと。

Jan 30 03:17:17 <5.3> oyster902 syslogd: exiting on signal 15
Jan 30 05:32:24 <0.6> oyster902 syslogd: kernel boot file is /boot/kernel/kernel
0144さぼてん ★
垢版 |
05/02/01 10:53:49ID:???0
oyster243のリブート要請メール出しましたー。
ううむ。
0145root▲ ★
垢版 |
05/02/02 13:08:48ID:???0
oyster902 リブート要請しました。
0146root▲ ★
垢版 |
05/02/02 13:19:49ID:???0
oyster902 リブートかかりました。
日本時間16:00ぐらいから、ぼちぼち対処開始ってとこかと。

場合によっては、HDD入れ替え作業→サービス一時中断へ。
0147root▲ ★
垢版 |
05/02/04 14:14:58ID:???0
また不調になったので、oyster902のリブート要請を出しました。

いったん拡張ディスクなし(ソフトウェア的に)にしといて、
5.3Rに上げた方がいい気がしてきました。
0148root▲ ★
垢版 |
05/02/07 02:37:49ID:???0
oyster902 リブート要請出しました。ううむ。
0149root▲ ★
垢版 |
05/02/08 00:07:37ID:???0
oyster902 リブート要請しました。

上がったら、Sumaストレージを中心に、
設定を見直す予定。
0150こうすけ ★
垢版 |
05/02/19 07:59:15ID:???0
c-au1.2ch.netが死んでいるみたいなのでリブートお願いします。
ssh、ftpも応答なし。。。
0152こうすけ ★
垢版 |
05/02/19 08:55:14ID:???0
>>151
ありがとうございます。
後はまたーりと待ちます。
0153root▲ ★
垢版 |
05/02/21 06:32:33ID:???0
tiger503 リブート要請しました。
0154root▲ ★
垢版 |
05/03/04 12:59:41ID:???0
banana273.maido3.com (cvsup.peko.2ch.net)
リブート要請します。

blackgoat4からcvsupしてたら、なんかつながらなくなった、、、。
0155root▲ ★
垢版 |
05/03/04 15:42:34ID:???0
リブートいただきました。

#vm.defer_swapspace_pageouts=1
#vm.disable_swapspace_pageouts=1

をコメントアウトして、スワップを使うのを許すことにした。< banana273
0156root▲ ★
垢版 |
05/03/11 12:24:22ID:???0
banana307.maido3.com (BBM/m.2ch.net)
リブート要請しました。

上がったら >>155 と同じ設定、入れておくか。
0157さぼてん ★
垢版 |
2005/03/21(月) 15:49:11ID:???0
banana210.maido3.com (pc5.2ch.net)

pingは通ったけどhttp応答がなかったので
リブート要請しましたー。
0158root▲ ★
垢版 |
2005/03/21(月) 18:00:31ID:???0
tiger503.maido3.com (live20.2ch.net)
リブート要請しました。
0160桃色吐息 ★
垢版 |
2005/03/30(水) 00:16:19ID:???0
banana702.maido3.com (www2/wow/okazu/vip.bbspink.com)
リブート要請出しました。
0161root▲ ★
垢版 |
NGNG
banana404.maido3.com (206.223.150.140)
リブート要請しました。
0164root▲ ★
垢版 |
NGNG
oyster902.peko.2ch.net (206.223.151.230)
リブート要請しました。
0165root▲ ★
垢版 |
NGNG
banana406.maido3.com (206.223.150.190) (c2/c-others2)
リブート要請しました。
0166root▲ ★
垢版 |
NGNG
banana403.maido3.com (206.223.150.95) （c-au/c-au1)
リブート要請しました。ううむ。
0167root▲ ★
垢版 |
NGNG
oyster902.peko.2ch.net (206.223.151.230)
リブート要請しました。

原因はなんだろう。

とりあえず、Sumaストレージもリブートしておこう。
0168root▲ ★
垢版 |
NGNG
再度リブート要請出しました。

上がったら、902はちょっとまじめに調べます。
0169未承諾広告※ ◆TWARamEjuA
垢版 |
2005/04/10(日) 09:31:25ID:fCwXKK6J0
>> Supervise2ch messages (http://sv2ch.baila6.jp/)
Date: Sun Apr 10 06:44:00 2005 JST-9 (Sat Apr 9 14:44:00 2005 PST+8PDT)
Target: banana403.maido3.com[c-au1.2ch.net] 206.223.150.95

って事でリブート要請出しました。
0170未承諾広告※ ◆TWARamEjuA
垢版 |
2005/04/11(月) 07:44:37ID:fAEQqi4E0
>>> Supervise2ch messages (http://sv2ch.baila6.jp/)
Date: Mon Apr 11 05:42:13 2005 JST-9 (Sun Apr 10 13:42:13 2005 PST+8PDT)
Target: cobra2245.maido3.com[bbq.2ch.net] 206.223.151.205
Target: cobra2245.maido3.com[hack72.2ch.net] 206.223.151.205

って事でリブート要請出しました。
0171root▲ ★
垢版 |
2005/04/11(月) 17:07:50ID:???0
oyster902.peko.2ch.net (206.223.151.230)
リブート要請しました。
0172root▲ ★
垢版 |
NGNG
cobra2245 リブート依頼しました。

FreeBSD 5.3R-p8 は、amd64ではいまいちなのかも。
0173root▲ ★
垢版 |
NGNG
cobra2245、電源リセットによるリブートに失敗した模様。
このサーバはRAID 1なのですが。ううむ。
0174未承諾広告※ ◆TWARamEjuA
垢版 |
2005/04/12(火) 22:23:03ID:7pXg+pyt0
しゅこし待ってみましょうか♪＠cobra2245
0175root▲ ★
垢版 |
NGNG
banana224.maido3.com (206.223.151.120) = 2chdns7.maido3.com (206.223.151.122)
リブート依頼しました。
0176未承諾広告※ ◆TWARamEjuA
垢版 |
2005/04/14(木) 07:43:14ID:1zvtsFEu0
>>> Supervise2ch messages (http://sv2ch.baila6.jp/)
Date: Thu Apr 14 05:18:00 2005 JST-9 (Wed Apr 13 13:18:00 2005 PST+8PDT)
Target: tiger506.maido3.com[etc4.2ch.net] 206.223.152.30
Target: tiger506.maido3.com[game9.2ch.net] 206.223.152.30
Target: tiger506.maido3.com[dso.2ch.net] 206.223.152.30

って事でリブート要請出しました。
0177root▲ ★
垢版 |
NGNG
oyster901.peko.2ch.net (206.223.151.225)
リブート要請しました。
0178†正座会場 ◆jmq5OZqMNg
垢版 |
NGNG
　
0179未承諾広告※ ◆TWARamEjuA
垢版 |
NGNG
cobra2244.maido3.com[206.223.151.200] を Please reboot it しました。
0180root▲ ★
垢版 |
NGNG
oyster901.peko.2ch.net (206.223.151.225)
リブート要請しました。
0181さぼてん ★
垢版 |
2005/04/22(金) 11:16:20ID:???0
さきほどになりますけど、
banana274.maido3.com[206.223.147.230] リブート要請しましたー。
(already rebooted,)
0182こうすけ ★
垢版 |
2005/04/22(金) 23:42:13ID:???0
c-au1.2ch.net（banana403.maido3.com）のリブートお願いします。
0185root▲ ★
垢版 |
NGNG
cobra2246.maido3.com (206.223.151.210) = c-docomo3
リブート要請しました。
0186root▲ ★
垢版 |
NGNG
banana403.maido3.com (206.223.150.95) = c-au1
リブート要請しました。

ちと、落ちすぎ。
0187root▲ ★
垢版 |
NGNG
banana403.maido3.com (206.223.150.95) = c-au1
リブート要請しました。
0188未承諾広告※ ◆TWARamEjuA
垢版 |
NGNG
Date: Fri Apr 29 05:10:01 2005 JST-9 (Thu Apr 28 13:10:01 2005 PST+8PDT)
Target: banana238.maido3.com[stats.2ch.net] 206.223.147.35
Target: banana238.maido3.com[rock54.2ch.net] 206.223.147.35
Target: banana238.maido3.com[headline.2ch.net] 206.223.147.35

リブート要請しました。
0189root▲ ★
垢版 |
NGNG
banana403.maido3.com (206.223.150.95) = c-au1
リブート要請しました。
0190未承諾広告※ ◆TWARamEjuA
垢版 |
NGNG
banana403とtiger510がなかなか戻ってこないみたいなので要請してみました。

Date: Tue May 3 10:22:06 2005 JST-9 (Mon May 2 18:22:06 2005 PST+8PDT)
Target: banana403.maido3.com[c-au1.2ch.net] 206.223.150.95

Date: Tue May 3 09:42:08 2005 JST-9 (Mon May 2 17:42:08 2005 PST+8PDT)
Target: tiger510.maido3.com[hobby7.2ch.net] 206.223.152.70
0191root▲ ★
垢版 |
NGNG
tiger2508.maido3.com (206.223.150.17) = c-au5
リブート要請しました。
0192未承諾広告※ ◆TWARamEjuA
垢版 |
2005/05/09(月) 12:34:08ID:YOwYiFSa0
cobra2244 リブート要請しました。
0193未承諾広告※ ◆TWARamEjuA
垢版 |
NGNG
tiger2509 リブート要請しました。

Date: Mon May 9 18:18:09 2005 JST-9 (Mon May 9 02:18:09 2005 PST+8PDT)
Target: tiger2509.maido3.com[c-au6.2ch.net] 206.223.150.22
0194こうすけ ★
垢版 |
2005/05/10(火) 02:28:40ID:???0
tiger2510.maido3.com（c-docomo5）が落ちているみたいなので、リブート要請お願いします。
0195未承諾広告※ ◆TWARamEjuA
垢版 |
NGNG
>>194
tiger2510 のリブート要請しました。
うーん。やっぱり調子悪そうですよねぇ。。。＠ぉ
0196未承諾広告※ ◆TWARamEjuA
垢版 |
NGNG
tiger2507,2510,2511(c-au4,c-docomo5,c-docomo6)
リブート要請しました。
0197未承諾広告※ ◆TWARamEjuA
垢版 |
NGNG
Date: Thu May 12 16:12:03 2005 JST-9 (Thu May 12 00:12:03 2005 PST+8PDT)
Target: tiger2509.maido3.com[c-au6.2ch.net] 206.223.150.22

って事でリブート要請しました。
0198未承諾広告※ ◆TWARamEjuA
垢版 |
NGNG
>>> Supervise2ch messages (http://sv2ch.baila6.jp/)
Date: Thu May 12 17:20:00 2005 JST-9 (Thu May 12 01:20:00 2005 PST+8PDT)
Target: tiger2508.maido3.com[c-au5.2ch.net] 206.223.150.17
Target: tiger2512.maido3.com[c-docomo7.2ch.net] 206.223.150.37

Date: Thu May 12 17:32:06 2005 JST-9 (Thu May 12 01:32:06 2005 PST+8PDT)
Target: tiger2511.maido3.com[c-docomo6.2ch.net] 206.223.150.32

って事でリブート要請しました。た。た。
0199root▲ ★
垢版 |
NGNG
ということで、tiger2507〜2512についてはCPU交換作業のため
一時的にサーバダウンする予定なので、
上記6台については本日に限り、1時間ぐらい待ってから
リブート依頼をするようにしていただけると。

# そろそろ、安定するといいなぁ。
0200未承諾広告※ ◆TWARamEjuA
垢版 |
NGNG
>>199
もうちょと我慢？＠2511,2512(c-docomo6,7)
■ このスレッドは過去ログ倉庫に格納されています
ニューススポーツなんでも実況