2ch特化型サーバ・ロケーション構築作戦 Part32

◆4A8q3C5o8xCU · NG

2ch特化型サーバ・ロケーション構築作戦のスレッドです。

・２ちゃんねるのサーバロケーション、PIEに関する関連作業・調整事項
・DNS登録・変更関連の各種作業や調整事項
・２ちゃんねるのサーバで採用しているOS、FreeBSDに関する情報・調整事項
・各種作戦・プロジェクトとの連携、プロジェクト間の連携

等を取り扱います。

前スレ:
2ch特化型サーバ・ロケーション構築作戦 Part31
http://qb5.2ch.net/test/read.cgi/operate/1235553306/

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 00:48:27

>>564
明日からもがんばれって言ってくれたら
がんばれる気がする

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 00:49:04

工具足りなかったらうちいっぱいドライバーあるから言ってね。

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 00:49:11

forkが負荷高くて駄目ならしないようにすればいい→誰も来ない状態で大量にfork?

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 00:49:59

>>568
cpuも余ってたんでしょ? 追いつかなくても適切な処理はなされるはずだし、なされてないなら原因はやっぱりデッドロックだし。

**root▲▲ ★** · 2009/08/07(金) 00:50:51

>>572
> forkが負荷高くて駄目ならしないようにすればいい
↓
やばそうなサーバでははじめから最大数(>>551)

というかんじで。

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 00:50:54

サンキュウ
寝たふりするわ

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 00:51:04

今日はもう寝るから
明日も朝から仕事だし
帰宅する２０：００までには復帰しておいてくれ

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 00:51:09

これ以降はPIEに常時yutori7とtsushimaを
監視しといてとでも言うしかないな

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 00:51:21

>>563
＞寝る前にもう1回ずつリブート要請かな。< yutori7、tsushima

その後落ちたら、そのまま放置？

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 00:51:25

rootもおまいらも早く寝ろ
体壊さない程度にしとけ

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 00:53:55

全体的に負荷落ちてきてるぞ

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 00:54:06

A-tiger相当の性能のサーバを立てたのですがFreeBSDも奥が深いですね

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 00:54:33

盆休みおいしいです（＾ｑ＾）

**root▲▲ ★** · 2009/08/07(金) 00:55:00

>>573
上のほうでもありましたが、
> backlog(listernキュー)があふれて撥ね返されている

というかんじですね。

ちなみに httpd は普通に kill できるので、
わたし的にはデッドロックという印象は持っていないです。

**root▲▲ ★** · 2009/08/07(金) 00:56:46

>>578
> その後落ちたら、そのまま放置？

あとは適宜リブート要請(誰でも可能)というパターンかと。
ただすぐ落ちる状態でリブート要請しても、またすぐ落ちるだけかと。

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:01:13

ν即が無くなったら俺は何をすればいいんだ・・・

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:01:33

ﾌｯｶﾂﾀﾞｰ
まだ落ちてないよ

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:01:33

ν速復活したっぽいな

**root▲▲ ★** · 2009/08/07(金) 01:02:27

人が減ったっぽいので、さっき 1:00 頃に httpd を kill してみた。< tsushima

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:02:38

おっ、リブート成功かい

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:03:10

>>584
了解です。
取り敢えず、ゆっくり寝てくださいませ。

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:03:51

なんか、statsおかしくない？
http://stats.2ch.net/karasu2.cgi

**root▲▲ ★** · 2009/08/07(金) 01:05:47

>>591
数えるプログラムが謎のハングアップしてた。
リスタート完了。

◆NAO/2MXDEk · 2009/08/07(金) 01:06:50

いつの間にか新生ゆとりが投入されたと思いきや、なんかありそうな感じで・・・
# あまり流れがよくわかってませんが

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:07:24

バーボンハウスもおかしいような

http://qb6.2ch.net/_403/c403.cgi

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:08:49

>>592
お疲れさんでした。

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:17:10

>>594
ん、直った

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:22:09

ゆとり７一瞬復活の後沈黙か

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:25:35

tsushimaが復活したし、yutori7は今夜は諦めようよ。
rootさんお疲れ様でした。

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:27:49

るーたん今日はもう寝ていいよ
お疲れさまであります(´･ω･`)

**root▲▲ ★** · 2009/08/07(金) 01:35:29

1:30 になったので、
httpd を kill してみた。< yutori7

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:35:35

yutori7
ドメサカ復活しました

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:35:53

yutori7復活
root乙です！

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:37:06

ツイッターにサイバー攻撃か　利用不可能に
2009年8月7日1時15分

【ワシントン＝勝田敏彦】短い「つぶやき」を自由に書き込んだりできる人気の交流サービス
（ＳＮＳ）のツイッターが米東部時間６日朝、トラブルのため、利用できなくなった。
７月に韓国や米国の政府機関などが受けたのと同様の、ＤｏＳ（サービス拒絶）攻撃と
呼ばれるサイバー攻撃を受けている可能性があり、ツイッターの運営会社が原因を調べている。

ＡＰ通信によると、ツイッターは利用者が多すぎる場合や点検などのためにサービスを停止する場合があるが、
今回はそうではないという。

http://www.asahi.com/international/update/0807/TKY200908060372.html

これ今回のと関係ありそう？

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:38:49

そういえばこれってもう修正されたんだっけ? まだだっけ?
Apacheに新たな脆弱性発見
http://slashdot.jp/security/article.pl?sid=09/06/23/0455215
>この脆弱性は、これを利用したHTTP DoSツール「Slowloris」がリリースされたことから明らかになったとのこと。
>この攻撃ツールはApacheに不完全なリクエストヘッダーを送り続けるもので、Apacheが最後のヘッダが送られてくるのを待つ間、偽のヘッダを送ることで接続をオープンにし続け、Apacheのプロセスを一杯にさせるものだという。

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:41:13

>>600
yutori7復活した！！
無利しやがって…(´；ω；`)
rootさん乙です。

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:42:17

>>600
GJであります。
おつかれさまでした。

**root▲▲ ★** · 2009/08/07(金) 01:44:13

今回みたいな場合、あらかじめ
「1時になったらやります」「1時30分になったらやります」みたいなことは言えないですね。>>605
だって、そんなこと言ったらみんなその瞬間に（りゃ。

あとは朝に向けて人は減る一方だと思うので、
とりあえずお手柔らかにおながいします、というかんじで。

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:47:35

rootさん乙です

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:48:17

おつかれさん

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:48:18

いつものν速にもどった
ありがとroot

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:49:34

>>607
こういうケースなら人が減ってきただろう頃合いにしれっとやらないと…
あとは、落ちないことを願うのみです。
お疲れさまでした。

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:51:17

あらかじめ鯖を増強しておくのも必要かと。

本日はお疲れ様でした。

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:53:33

>>607
ごもっとも。
どうぞ、ゆっくり寝てください。
近所だったら寝酒を差し入れしたい気分だ。

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 01:58:02

ざっと見てきましたが、おかしくなってる板は無い様で
rootさん乙でした。

**root▲▲ ★** · 2009/08/07(金) 02:00:45

>>613
お酒飲めません。。。
下戸遺伝子ということで。

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 02:03:08

>>615
じゃ、甘味大量投下。
rootさんがFOXと同じ都市なら郵便受けに入れておくw

**root▲▲ ★** · 2009/08/07(金) 02:28:07

１号さん登場。
とりあえず、ここにリンク貼っておこう。

質問・雑談スレ294＠運用情報板
http://qb5.2ch.net/test/read.cgi/operate/1248527545/477-491

そろそろねるか。

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 02:49:32

おいちゃんにおねだり

じっぷら(liveplus)を、yutori7からatlantaに移転してほしい

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 02:52:54

伝書鳩。
【お止め組。】出動予定＆連絡詰所◆11
http://qb5.2ch.net/test/read.cgi/operate/1247755300/366-380

**root▲▲ ★** · 2009/08/07(金) 07:40:15

高木先生の日記。

高木浩光＠自宅の日記 - やはり退化していた日本のWeb開発者「ニコニコ動画×iPhone OS」の場合
http://takagi-hiromitsu.jp/diary/20090802.html

「蛸壺化」というのはなかなか。

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 09:24:17

んで、のりぴーが発見されたらまた落ちる可能性があるわけだけども

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 09:33:03

>>431
いや、PIEも儲かるのわかってて、コストに見合うと判断すれば帯域を解放するでしょ。
そのへんはパケモンの技術担当兼PIE COOのJimさんの判断になるんだが。

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 09:38:46

>>560
さあ、オレンジ畑で農耕してくるんだ（ぇ

>>564
Releaseになる時点で、今よりはややましにはなりますかね。
所詮観測的希望ってやつですが

◆NAO/2MXDEk · 2009/08/07(金) 10:40:45

>>620
とても面白い記事でした

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 11:17:35

1200MB/秒の転送を実現、PCIeバス直結型のストレージ「ExaRAID」[09/08/05]
http://pc11.2ch.net/test/read.cgi/pcnews/1249479505/

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 11:21:46

また落ちたね・・・yutori7

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 11:24:12

>>350
rootたんの予言が的中した

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 11:25:07

しばらくはこんな感じかね・・・

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 11:29:08

まあ、rootさんで設定できる箇所が限られてる鯖ですんで
全設定を触れる人が根本的に直さないことには
常時こんなことだらけと思ったほうがいいっすね

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 11:34:48

rootさんがsudoできるようにすればいいような。
そういう訳にはいかないのか

**root▲▲ ★** · 2009/08/07(金) 11:35:41

こっちに書いておくか。

top すると、

39597 ch2yutor7 1 44 0 79308K 13560K keglim 7 0:00 0.00% httpd
39531 ch2yutor7 1 44 0 80252K 13484K keglim 5 0:00 0.00% httpd
39506 ch2yutor7 1 44 0 78192K 13488K keglim 3 0:00 0.00% httpd
39557 ch2yutor7 1 44 0 79296K 13632K keglim 2 0:00 0.00% httpd

というのがいっぱい並んでいるですね。

状態欄が keglim というのはあまり見かけないけど、
この状態になると、もうだめぽな模様。

**root▲▲ ★** · 2009/08/07(金) 11:36:35

カーネルソース grep してみた。これかな。

%find . -name '*.[ch]' -print | xargs grep keglim
./vm/uma_core.c: msleep(keg, &keg->uk_lock, PVM, "keglimit", 0);

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 11:37:29

わかった、一行にまとめてくれ

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 11:38:51

専門用語が飛び交うスレで野暮なレスしなさんなｗ

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 11:40:45

キー！！

**root▲▲ ★** · 2009/08/07(金) 11:44:58

どうやら ./kern/kern_mbuf.c か。
keg とかこのへんに結構ある。

ということは、ネットワークの鍛えが足りないかんじかも。
mbuf が少ない、というより増やしてないとか。

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 11:45:15

そういうときはこう言うんだ
日本語でおｋ

**root▲▲ ★** · 2009/08/07(金) 11:49:05

これかな。

ソケットのバッファ最大値がデフォルト値のままなのね。< yutori7

・changi namidame anchorage 等

%sysctl kern.ipc.maxsockbuf
kern.ipc.maxsockbuf: 20480000 <= 増やしてある

・yutori7

%sysctl kern.ipc.maxsockbuf
kern.ipc.maxsockbuf: 262144 <= デフォルトのまま

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 11:50:16

>>638
原因はそれっぽい…かな？

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 11:50:49

>>638
基本中の基本

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 11:51:53

>>638
tsushimaも増やしてある？

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 11:52:52

さらっと特定するのは、経験の賜物だなあ･･･

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 11:53:02

>>641
あ、それ気になった

**root▲▲ ★** · 2009/08/07(金) 11:53:24

どくおさんへ:

kern.ipc.maxsockbuf はこのスレでも幾度となく出てきたパラメータです。
kern.ipc.maxsockbuf で Google するといっぱい出てきます。

FreeBSD のデフォルト値は忙しいサーバ向けではないので、
増やしたほうがいいかと。

今の root 権限ありサーバでは、/etc/sysctl.conf にこんな設定を入れています。
何度も痛い目にあって設定したこの値には実績があるです。
このスレの過去ログにも書いてあるはず。

ちなみに # でコメントしてある値は旧 tiger (2G mem)の値です。

---
# increase listen queue
#kern.ipc.somaxconn=8192
kern.ipc.somaxconn=32768
#kern.ipc.maxsockbuf=2097152
kern.ipc.maxsockbuf=20480000

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 11:53:35

>>641

増やしていなそうなので・・落ちたらしい。

**root▲▲ ★** · 2009/08/07(金) 11:55:10

>>641
デフォルトのままのようです。

**root▲▲ ★** · 2009/08/07(金) 11:56:50

%sysctl kern.ipc.somaxconn
kern.ipc.somaxconn: 128

デフォルト 128 しかないのね(´･ω･｀)。

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 11:56:59

逆に減らしてみて動作見るとか
一回だけならひろゆきにも分からんよ

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 11:57:08

>>646
そりゃ落ちるww

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 11:57:31

もうだめぽorz

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 12:00:09

>>647
>>649

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 12:01:07

>>647
基本中の基本　その２

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 12:02:15

検索したらどうやら忙しい鯖を持つ奴にとっては初歩的話っぽいな

**root▲▲ ★** · 2009/08/07(金) 12:03:00

>>640 >>652
わたし、2003年にはこのパラメータ、いじっていたような気がする。
@ このスレの過去スレで

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 12:04:03

>>653

慣れだよ。なれ。

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 12:05:40

A-Tigerと似た構成のサーバ建てた俺にとってはそういうのを公開してもらえるのは嬉しいことだ

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 12:06:47

2ch特化型スペシャルサーバ構築大作戦
http://qb.2ch.net/test/read.cgi/operate/1052923573/834-
http://qb.2ch.net/operate/kako/1052/10529/1052923573.html

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 12:06:58

FreeBSD kernel tuning for large siteって奴ですね。

・listen キューを増やす
・大規模サーバの場合 swap 張ったら負け

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 12:07:08

root権限持ってないrootたんなんてrootたんじゃないやい

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 12:07:40

>>655
http://cocelo.s201.xrea.com/freebsd/index.php?FreeBSD%2FTuning
まあ検索しない限りわからんから慣れか

**root▲▲ ★** · 2009/08/07(金) 12:08:05

久しぶりに今の root 権限あり A-tiger で設定している
/etc/sysctl.conf の主なチューニング内容を上げておくです。
全部が yutori7 に適用可かどうかはわかりませんが、現状ということで。

ちなみに上のほうほど「昔に」設定いじったことのあるパラメータです。

# added for 2ch
# increase maximum file descriptors
kern.maxfiles=131072
kern.maxfilesperproc=65536
# increase listen queue
#kern.ipc.somaxconn=8192
kern.ipc.somaxconn=32768
#kern.ipc.maxsockbuf=2097152
kern.ipc.maxsockbuf=20480000
# see http://qb5.2ch.net/test/read.cgi/operate/1097931665/666-676
net.inet.icmp.icmplim=3000
net.inet.icmp.icmplim_output=0
# XXX
net.inet.tcp.delayed_ack=0
# increase maximum value of ufs directory hash
vfs.ufs.dirhash_maxmem=134217728
# http://qb5.2ch.net/test/read.cgi/operate/1235553306/590
vfs.lookup_shared=1

**root▲▲ ★** · 2009/08/07(金) 12:09:33

>>657
どもです。

HE時代にrootありサーバの1号機(news5.2ch.net)を作る時からやってたですか。

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 12:10:18

>>661
yutori7って帯域以外は余力あったはずだから、他の鯖よりチューニングできるのでは？

**root▲▲ ★** · 2009/08/07(金) 12:11:32

どくおさんへその2:

ちなみに変更はリブートしなくてもいけるです。

1) >>644 を /etc/sysctl.conf に追加
2) cd /etc/rc.d
3) sh sysctl restart

**root▲▲ ★** · 2009/08/07(金) 12:12:18

>>663
そのへんの値の調整は
まさに物が来て動かし始めてからの「腕の見せ所」なのではないかと。

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 12:12:56

>>663
yutori7のrootを貰ってたらの話だけどな
そしてrootあったら今頃こんなことにはなっていない

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 12:13:24

>>660
何度も落とされたり、何度も落ちそうになったりして・・お客からがんがん言われて・・。
サーバーを分散したりして、そうやって経験を積んできた。
by Google

**動け動けウゴウゴ２ちゃんねる** · 2009/08/07(金) 12:16:15

ところでサーバーの復旧作業やってるんですか？
tsusimaだけでも先行するとか

**root▲▲ ★** · 2009/08/07(金) 12:17:59

>>668
私が現状できることは、

・ここに状況を書く
・私なりの分析と対応の可能性をここに書く

というかんじで。