2ch特化型サーバ・ロケーション構築作戦 Part32
■ このスレッドは過去ログ倉庫に格納されています
2ch特化型サーバ・ロケーション構築作戦のスレッドです。
・2ちゃんねるのサーバロケーション、PIEに関する関連作業・調整事項
・DNS登録・変更関連の各種作業や調整事項
・2ちゃんねるのサーバで採用しているOS、FreeBSDに関する情報・調整事項
・各種作戦・プロジェクトとの連携、プロジェクト間の連携
等を取り扱います。
前スレ:
2ch特化型サーバ・ロケーション構築作戦 Part31
http://qb5.2ch.net/test/read.cgi/operate/1235553306/ みてきます。
でも帯域だったらどうしようもない予感。 今BIOSうpしようとしてるんだからびびらせないでくれよ 帯域だったら・・・('A`)
お茶置いておきますね
つ旦~~ サーバ遊んでますね。
tiger3547:~$ uptime
6:53AM up 1 day, 11:29, 1 user, load averages: 1.06, 4.40, 3.30
100Mbpsがあふれたに10000なんとか。 そうでもないかな。
httpd が変ですね。
多分突然がばちょと来て変になったかと。
tiger3547:~$ telnet localhost 80
Trying 127.0.0.1...
Connected to localhost.
Escape character is '^]'.
Connection closed by foreign host.
リブート要請で対応します。
以降、サーバダウンスレに以降します。<作業場所 なんにせよゆっくりでも確実に直した方がいいですわなぁ Xeon X5580 x2のムキムキマッチョの変態サーバーひとつで鯖数減らす計画マダー? root 権限なしサーバにつき、
私のほうでの詳細な分析はできないかな。
あと、転送量グラフが今正しくとれてないのも痛いかも。
Graph: tiger3547
http://traffic.maido3.com/2WXB/YwZV/i0Bs/
ということで、あとはサーバダウンスレで。 ps してみると httpd が D (ディスクI/O待ち)ばっかりですね。
ジンギスカンにしてなかったのも敗因かな。 yutori7をtakesima戻せ
新鯖がこの調子じゃどうにもならん
うまくいく保障なんてないのに後先考えずに新鯖に板を詰め込むのは
ある意味2chの伝統だからなぁ、もちろん悪い意味においてな どこがボトルネックなんだろうね。
ネットワーク帯域ならディスク高級品にしても意味ないよなあ…
ってか使い潰す前提で一台SSD入れて欲しいなーとか思ってるけど爆発的に来ると
多重アクセスで本領発揮する前にソフトウェア側が逝っちゃうのかな。
出荷停止の新intel ttp://www.legitreviews.com/article/1022/11/
Indilinx,サムスン,旧intel ttp://www.legionhardware.com/document.php?id=850&p=5 >>460
負荷テスト中に事件が起こると思わなかった。
ではないかと。 まず、httpd が腐っていたです(これは実際に確認しました)。
root 権限なしのサーバは「どばっ」とか「どーん」には強くないです。
というかそういうセッティングです。どくおさんの日記にもその旨あります。
どこだったかな。httpd の待機数を少なくしてある話。
あと今回、ログインそのものにも時間かかっていたので、
帯域もあふれていたかもしれないです。
(これは今となっては確認のしようがない) 事件が負荷テスト,そしてそれに対抗する為のいろんな条件出しじゃないの?
いままでも,これからも,そうして2chは成長していくのだ
っておいちゃんが言いそう 上がった。
mnewsplus
news4vip
ジンギスカンにした。 実況以外の上位20板は、完全別鯖にしろよ。
詰め込みすぎじゃボケ お塩の時点で帯域使い切ったのに、なんで前よりも詰め込んだんだろう >>465
・httpd待機数を増やす
・帯域を200Mbps、できれば1Gbpsにする
こうすれば解決するってこと? BIG-Serverで100Mbpsが限界って決まってるしなぁ
なんとかならないものか 復旧しても殺到して即死させられるなら人が減るまで放置したほうがいいかもしれんね しばらく様子見。
これ以上は現時点ではちょっとどうしようもない感じ。
ただ、サーバのCPUがとっても遊んでいるのは確か。
(ログインしてるからわかるます)
なんか悲しい。 次はgimpoが犠牲になりそうなんですけど・・・
いい加減鯖落ち連鎖を断ち切って欲しいな ミサイル誤射のときも、同じような理由でtsushimaが落ちたよね(どくおさんの日記はその時のことを書いてあるんだっけ?)
メモリ9GBも搭載してるんだし、httpd待機数増やさないのかな >>479
同意。批判要望はむしろqb5に入れてほしい。 >>485
ttp://ch2.ath.cx/
gimpo鯖の負荷ヤバス 何でPIEやゼロは、特殊な案件だって分かってるのに一般販売用設定で納品すんだ。
頭おかしいだろ >>487
たまにつながっても、向こうから接続切ってきますね。
httpdが異常起こしている
httpdが売り切れ
100Mbpsあふれ
等、いろいろ考えられるけど、
どれも確固たるものはわからない。 監視所のグラフなんかおかしくね?
ほとんどの鯖でcurrent postsが落ち込んでるんだけど おい、何のことだかさっぱりだが
httpdなるものが売り切れらしいぞ >>497
買い占めようとしてももう間に合わないな >>497
httpdとは、htmlを表示させるための、デーモン(プログラム)のこと。
これが死ぬと・・表示できなくなる。 >>495
殆どの監視所は2chとは関係ありません
>>491
rootなしサーバのセッティングも「2ちゃんねる用」になっているはずですね。
maido3.comのタリフにもそのメニューがあったはず。 >>497
本来10万人通れる道路なのに、糞鯖管が2万人までしか通れないように通行制限してる
そんな感じ。 >>502
root権限付きi7を1Gbpsで用意してもらって2、3鯖分詰め込んでよrootたん これってだれだろ?
banana3210.maido3.com. 通行制限してないらしいから、
・道路が壊れた
・そもそも10万人以上来ている
さぁどっちだ。 売り切れだっつーのに売り場に殺到して売店が押し流された >>487
HEADリクエストは通ってたのか。
FreeBSDのtcpレイヤかネットワークドライバが腐ってるに一票。メモリ無限に喰ってカーネル内メモリ喰い荒らしとか? >>509
カーネル・ユーザランドともにメモリを食っているような形跡は見当たらないです。 >>511
ってことは複雑な形でのデッドロックかな?
ソース読まないことには想像しにくいけど 韓国が攻撃してきたに一票
あるいは、新型のワームウィルスか
こっからあるブログのコピぺ↓
学校で感染力の強いワーム型のウイルスが大流行しています。
ついに、私のパソコンでも感染を確認。
メインで使用している1機(win2Kでセキュリティは独自仕様)は無事だったのですが、
『重たい』という理由でセキュリティソフトを一切入れていないレンダリングサーバ2機(共にwinXP proSP3)が餌食になりました。
このワームは、感染するとautorun.infと実行ファイルをドライブのルートやシステムフォルダ内に作成し、レジストリに不正なデータを追加します。
また、USBメモリ等の外部記憶装置を接続すると、それに自身の複成を作成します。
感染した際の主な症状としては、
・システムファイル・隠しファイルが表示できなくなる
・マイコンピュータからCドライブ等が開けない
・パソコンのリソースを喰いまくって、動作を鈍くさせる
等があるようです。
もっと酷い症状を引き起こす新種が現れるかも知れませんが。
亜種、新種がかなり早いサイクルで出回っているようで、
完全に検出出来るパターンファイルは私が調べた範囲ではまだ見付かっていません。
学校と自宅で確認したウイルスのファイル名は以下の通り。
存在する場所は主に WINDOWS/system32 や、ドライブのルートです。
xvassdf.exe
4tddfwq0.dll
3m2.exe
2w2.com
ierdfgh.exe
mmvo.exe
revo.exe
駆除の方法、レジストリの修正については、他サイト様を参照して下さい。 >>514
ディスク I/O も遊んでるです。
CPU も遊んでいる。
さっきも書きましたが「せっかくの力を発揮できていない」という感じ。
いろいろ見えない(自分がオーナーのプロセス以外見えない、等)ので、
これ以上は判断つかないですね。転送量グラフも見えないし。 こう言ってはなんですが、もう非科学的なものしか考えられない・・・ 単純に100Mbpsかhttpdあふれなんじゃないかなぁ。
と思いますが、>>516 の線も(りゃ。 完璧にデッドロックですね、多分。
以下で修正されたのにまた別の場所から虫が湧き出てきたのでしょう。
>FreeBSD 7.2に3つの不具合、デッドロックと通信性能の低下
>http://journal.mycom.co.jp/news/2009/06/25/051/index.html >>515
httpd が D のまま眠っている感じでしょうか。。。
若干時間をおいてからreboot要請するのが吉かなかな。
さすがに4時おきでしたのでそろそろ就寝m(_ _)m >>519
yutori7 は 8-BETA2、しかも RELANG_8 が切られるよりも前のものなので、
どんな虫がいても正直あんまり驚かないです。
>>520
おつですた。 ニュー速と+を一緒にしても、離しても結果は同じだったんでしょうかねぇ 芸スポ難民が押し寄せるまでは無傷だったじゃん>ニュー速と+ 落ちてるのは、yutori7 と tsushima なのかしら。 >>524
いやーイナゴのように食い尽くしていくんじゃないかなぁーとおもて 芸スポあるところ鯖落ちあり、が定説に近くなってきた気がする今日この頃 マァヴの書き込みに反応した大量書き込みで落ちたに一票
もしくはマァヴによる非科学的n >>525
http://ch2.ath.cx/
では、間違いなく・・yutori7とtsushimaがダウン。
他の監視係でも、確認が取れている。 >>521
ストレステストでテストしてから使用するようにするといいかもです。
vipでテストに比べると少々つまらなくなるかもですが。
でかいニュースが来たときの鯖のドミノ倒しはニュース系板が入っている鯖の宿命ですな 芸スポは今日の昼間も相当な速さでスレ消費していて順調だったし、
httpdが溢れたとは・・・。
やっぱり、非科学的な何らかのパワーがネット回線に流れ込んで
httpdを溢れさせたんだ! >>534
ストレステスト = たぶん今回の
なんじゃないのかなと。< maido3.com的に さっきgimpoも危うかったのかな?なんか500番が返って来たような・・・
今はその二つですねぇ
>>533
どこに入れとこうが誰にも止められないんですなぁ >>537
ここは原因を調べるのが面倒なストレステストでつね>< だいたいこういうテストをいつもやってるサイトだしね
そうしてなにも知らない奴が客面で「なんでこんな目にあわせる?」とか
勘違い発言するところまでがいつもの光景 connect() に対して connection aborted が返ってくるのは早かったので帯域じゃないと思います。
connection aborted はソケットの backlog(listernキュー)があふれて撥ね返されている状態
なので httpd がリクエストを捌けてないんだと思います。
StartServers が小さいので「どーん」に弱いというお話でしたが、一度 MaxSpareServers まで
上がってしまえば(MaxSpareSreversが適正ならば)徐々に回復するはずで、
今回はリブートするまで長時間ずっと回復しなかったので、StartServers のせいかどうか。
逆にサーバー性能に対して MaxSpareServers を大きくとりすぎたために、「どーん」と来たときに
Apacheが身動き取れなくなったんじゃないかという気がします。
一番疑わしいのはディスクの iowait ですが、もしかしたら Apache内の排他制御とかで詰まってたのかも。
いずれにしてもボトルネックがわかrないと対策しようがないですね。 ■ このスレッドは過去ログ倉庫に格納されています