X



トップページ運用情報
1001コメント375KB

【Project peko】2ch特化型サーバ・ロケーション構築作戦 Part18

■ このスレッドは過去ログ倉庫に格納されています
0001220.117.237.222@root▲ ★
垢版 |
NGNG
peko作戦について語るスレです。
サーバロケーションPIEに関する話題もこちらで。

<現在の主要なテーマ>
・「Love affair作戦」による、携帯系サーバの大幅強化・外向けdat供給サーバの構築
・「雪だるま作戦」による、スケーラブルなサーバ群構築
・BBQの2台体制化・RAID1化
・FreeBSD 5.4Rの導入検討
・各種作戦・プロジェクトとの連携
・FreeBSDのさらなるチューニング詰め

<主な関連スレッド>
【Love Affair】携帯からのアクセスに対する考察・次の一手 Part3
http://qb5.2ch.net/test/read.cgi/operate/1095146311/
■新春特別企画「雪だるま作戦」liveサーバの飛躍なるか!? Part1
http://qb5.2ch.net/test/read.cgi/operate/1105035540/

<主な関連サイト>
MRTGによる統計情報: http://mumumu.mu/mrtg/
2ちゃんねる/PINKちゃんねる 稼動中のサーバ一覧: http://mumumu.mu/serverlist.html
2ちゃんねる サーバ負荷監視所: http://ch2.ath.cx/load/
2ch 鯖監視係。: http://sv2ch.baila6.jp/

<前スレ>
【Project peko】2ch特化型サーバ・ロケーション構築作戦 Part17
http://qb5.2ch.net/test/read.cgi/operate/1107376477/
0390じじぃ その4 ◆HETAREzfq.
垢版 |
NGNG
ヅアルコアのdualとquadなら
quadのほうが単純性能でみればええはずだす

ヅアルコアの場合、1コア当たりが使えるメモリ帯域が少なくなるでね

>>389
たぶん上記理由によるアレじゃろうて
0392動け動けウゴウゴ2ちゃんねる
垢版 |
2005/05/20(金) 02:34:38ID:DLeLhwmV0
クロックアップによる性能向上は望みにくいから、どっちにしてもDualCoreで
SMP的に性能アップするのがトレンドでしょ。
AMDとIntelがお互いに無茶して性能向上競争しているし。

あとサーバーだったらクライアントよりも原理的にDualCoreの恩恵は受けやすい。
0394root▲ ★
垢版 |
NGNG
…で、>>377 ですが、tiger2507〜2509 は現地での対応ができないと作業できないので、
先に oyster243 を確認してくるです。
0395 ◆Reffi/bQ.c
垢版 |
2005/05/20(金) 02:39:23ID:MWa8xtoG0
とりあえず、本家より参考データと言うことで


ttp://www.amd.com/jp-ja/Processors/ProductInformation/0,,30_118_8796_8800~97052,00.html
0396root▲ ★
垢版 |
NGNG
oyster243 の構成は、問題ないようです。
正しく RAID 1 になっていました。

amrd0: <LSILogic MegaRAID logical drive> on amr0
amrd0: 35002MB (71684096 sectors) RAID 1 (optimal)
0399資材二課 ★
垢版 |
2005/05/20(金) 02:46:29ID:???0
2507,8,9 は現地でリブートを試みてはいるようだ、
0400root▲ ★
垢版 |
NGNG
>>397
おぉ、頭うちなんじゃなくて「いい方にずれる」ってことですか。

>>398
…ということになります。
0402資材二課 ★
垢版 |
2005/05/20(金) 02:47:31ID:???0
SingleCore x 2 < DualCore x 1

ということなの? @opteron
0403root▲ ★
垢版 |
NGNG
>>399
了解です。それでは oyster243 のセットアップ作業しながら、
待機しています。

Q上げておいたほうがいいかも。
0404root▲ ★
垢版 |
NGNG
>>402
singlecore x 2 > dualcore x 1

だと思っていました。
>>397 のリンク先はまだ見ていませんが、どうなんだろう。
0405動け動けウゴウゴ2ちゃんねる
垢版 |
2005/05/20(金) 02:51:23ID:zMiFmmjU0
>>400
あ・・ぅ・・変な期待されてしまったみたい・・

マルチコア(CPU2個)=デュアルコア(CPU1個)=シングルコア(CPU1個)*2 ですです

いやぁ 先ほど10倍と書きましたが、なんかの雑誌で読んだものなんで未来志向かもかも
0406じじぃ その4 ◆HETAREzfq.
垢版 |
NGNG
>>402
メモリを使わずにCPUcacheだけで済ますような
ブツじゃと、間違いなくそうなるじゃろうて

コア間を繋ぐバスはかなりな高速のはずじゃから

>>404
おらもそうおもっておった、
実際>>395
singlecore x 2 > dualcore x 1 なアレに見える
0409root▲ ★
垢版 |
NGNG
評価用のブツとして、Polywellから期間限定で借りてみるというのはどうなんだろう、
などと言ってみたり。

しばらく 243 方面の作業します。
0411資材二課 ★
垢版 |
2005/05/20(金) 02:58:47ID:???0
HDD は備蓄のことを考えると
今まで通りがよいですな。
0412root▲ ★
垢版 |
NGNG
tiger2508 2509 上がりました。

これからいくつか、設定を「マイルド」にしてみます。

tiger2507 は、まだ上がっていない模様。
0413root▲ ★
垢版 |
NGNG
>>411
今までのものでよいと思います。

ちなみに今入っている SCSI HDD は既に生産中止(新ロットに変わった)はず。
0414root▲ ★
垢版 |
NGNG
中止はいまいちすね。終了が適切でした。
0416root▲ ★
垢版 |
NGNG
banana403/404と同じセッティングまで、各種数値をマイルドにしました。
で、リブート中。< tiger2508/2509

tiger2507 もリブート出来次第、同じ設定にする予定。
これにしたら、例の「十分潤ってから問題」は、対応しなくていいのかも。
0417資材二課 ★
垢版 |
2005/05/20(金) 03:12:00ID:???0
Sean に ICQ した方が良いかも、
格闘しているらしい
0418root▲ ★
垢版 |
NGNG
お、ひょっとして

SEMAPHORES "Enable sysv IPC semaphores (default: fcntl())"

をオンにしたからだめなのかも。semwait ばかりになることがある。
ちょっと、変えてきます。
0420root▲ ★
垢版 |
NGNG
作業の間に落ちられると困るので、
tiger2508 tiger2509 httpd 落としました。
0422root▲ ★
垢版 |
NGNG
セマフォ式やめてみた。
なんか、すんごい起動がスムーズになったような。< tiger2508/2509
0424root▲ ★
垢版 |
NGNG
Jimさんから連絡もらいました。

いったん、全部httpdを切りました。
少し落ち着いてから、セッティングを見直す作業に入ります。
いちから。
0425root▲ ★
垢版 |
NGNG
で、2507 2508 2509 はアップしています。
0426資材二課 ★
垢版 |
2005/05/20(金) 04:10:57ID:???0
Jim が Plywell へ行くというので、ついでに聞いてきてもらうことにした。

1) DualCore Dual を 1U で作ってちょ
2) いくらになるねん?

0427root▲ ★
垢版 |
NGNG
>>426
了解です。

普通にリテールプライスだとたぶん高いので、
Jim-Sam priceを聞いてみていただけると。
0428root▲ ★
垢版 |
NGNG
Seanさんとtiger2510〜2512について話し中。
作業がスムーズに行けば、今夜あたりに、Polywellから戻ってくるかもしれないとのこと。

で、SCSI仕様のtiger2513とtiger2514が来るらしいです。
vipサーバの模様。
0429動け動けウゴウゴ2ちゃんねる
垢版 |
NGNG
AMDのベンチマークで使用してる2wayマザーはS2882とありますね。

Thunder K8SD Pro (S2882-D) DUAL CORE READY / Rackmount Ready !!!
ttp://www.tyan.com/products/html/thunderk8sdpro.html
価格はonboard SCSI版で $540くらい?

ちなみにこんな記事も。275が169,000 x 2かぁ・・・個人ではとても手がでませんw

デュアルコアOpteronの予約受付開始、2way用の3モデル
ttp://www.watch.impress.co.jp/akiba/hotline/20050521/etc_dcopteron.html
0430編成局長 ★
垢版 |
2005/05/20(金) 06:12:17ID:???0
>>283
ファイル添付機能は管理人のみ使えるようにしました
0433root▲ ★
垢版 |
2005/05/20(金) 06:36:13ID:???0
eaccelerator の調子がいいようなら、epg とかにも入れてみるかな。
…と、チラシの裏メモ。
0434動け動けウゴウゴ2ちゃんねる
垢版 |
2005/05/20(金) 06:50:19ID:1xLrL2ci0
ざっと見でまとめると、

・DualCoreいれようか?
・ってそもそもボトルネックはそこ?
・むしろHDDが詰まっているんじゃない?

わたしが思うに、実況系はキャッシュ多めなのを入れるとかするだけでかなり違う悪寒

個人的には↓なんですけどw
  _  ∩
( ゚∀゚)彡 solaris10!solaris10!
 ⊂彡
0435 ◆/dAlcsdWd2
垢版 |
2005/05/20(金) 10:45:56ID:+YLO/Vyq0
人柱と実験は2chの華(違
うひょひょ
0436モーマン☆鯛。@p2
垢版 |
2005/05/20(金) 12:55:22ID:ihJhgy880
DualCoreのおいしいところは,SingleSocketでの
スペース的なメリットと発熱量の低減,また,DualSocketでの
更なる処理能力うp や,処理の分散(cgi内部処理とI/O処理 可能かどうかは未知数)が
有るんだと思うんだな。
これからを見てみないとわかんないですけど,DualCoreが必要か否かを
見極めて,その後SingleSocket/DualCoreか,DualSocket/DualCoreかを
見極める事が出来れば幸せになれると思うんだな。

とりあえずSingleSocket/DualCoreの場合,Socket外部へのI/Oが無ければ
DualSocket/SingleCoreに比べて内部で信号をやり取りできる分
処理能力は向上すると思うんだな。

チラシの裏っぽいかも。ゴメンチョ
0438aozora ◆/dAlcsdWd2
垢版 |
2005/05/20(金) 14:45:43ID:+YLO/Vyq0
小虎は2Uだったのですね。
FreeBSDがPowerNOW!に対応でけたら、サボってる時はさらにお熱さがりますな。
0439動け動けウゴウゴ2ちゃんねる
垢版 |
2005/05/20(金) 15:11:17ID:1xLrL2ci0
>>434
・・・とおもったらもうちょっとかかりそうですねー>ZFS
ベータは今年後半には出そうだけど

ttp://japan.cnet.com/news/ent/story/0,2000047623,20083500,00.htm

私がSol10で人柱!といっているのはrootさんやJimさんの負荷がちょっと減るかな、と思うからでつ。
それに、

・ZFSで動的にストライピングできる
・自己予測ヒーリングでHDDやメモリの一部があぼーんしてもあぼーんした部分を切り離してそのまま平然と動く

・・・などなどとチラシの裏してみますた、スマソ
0441root▲ ★
垢版 |
NGNG
Solaris 10はありえる選択かもですが、
ちと、すぐにはややむりぽかもですね。>>439

で、DNS依頼いきます。
0442root▲ ★
垢版 |
NGNG
ということで、c-docomo系の新サーバへの移行依頼いきます。
以下のDNSの変更をよろしくお願いします。

(従来)
+c-docomo.2ch.net:206.223.151.216

(変更後)
+c-docomo.2ch.net:206.223.150.27
+c-docomo.2ch.net:206.223.150.32
+c-docomo.2ch.net:206.223.150.37
0444 ◆IDaU21y6wI
垢版 |
NGNG
>>283
info@wiki はもともと管理者以外はアップロード不可なので大丈夫だと思いますー。
0449 ◆f0.zuburi6
垢版 |
NGNG
プロダクトナンバーが上がる方が消費電力も下がるんだ。
でもDualCore化でも消費電力3割増(測定環境が同じじゃないけど)に押さえてるのは
涙ぐましい努力のなせる業なんだろうなあ…
0452動け動けウゴウゴ2ちゃんねる
垢版 |
2005/05/20(金) 22:11:51ID:c9Nu9FFT0
248-252の比較は252が出たときの記事、ですので130nm(Rev.C)と比較する
趣旨のようです。
248-250が130nm(Rev.C)252が90nm(Rev.E)ですね。
表から推定するに、130nmの244程度の消費電力、になるのでしょうか。
従来のcobra機との比較と言う観点からは、130nmのコアと90nmの252の比較、
と言うのは外れではないのでは、と思います。
90nmの低クロック品はより、消費電力が下がるのは自明ですから。

個体差も有るでしょうからレビューの消費電力が保証されるわけでは
ないですが、90nmに移行して、252も爆熱、と言うわけではないようです。
0453 ◆f0.zuburi6
垢版 |
NGNG
そっかー,プロセスが違えば当然ではあるねえ。
でもDualCoreでも発熱が抑えられているのが確認できてるし,期待も出来る鴨かも
0454じじぃ その4 ◆HETAREzfq.
垢版 |
NGNG
Cool'n'Quietを動かすモジュールをぶち込めば1U化については
ひじょうに期待できるとおもうんじゃが

そのモジュールの安定性はどーなんだべ?
(そもそも鯖に挿れてええブツなのかどーか、それとももう既に挿れておるのか)
0457 ◆f0.zuburi6
垢版 |
NGNG
CPU自体が持っているので,マザーの対応次第じゃないかな?>C'n'Q
0459 ◆f0.zuburi6
垢版 |
NGNG
外部から明示的に動作を切り替えるモジュールかな?
調べてみるべか…
でもまあ,それ以前にCnQが動作するほど余裕ができるかどうかってのもあるねえ
0460 ◆f0.zuburi6
垢版 |
NGNG
あーそうか,ユーザー側でパフォーマンスを指定する事も可能なんだなあ。
こりゃいっそのことフルスロットルd(ry
0466 ◆f0.zuburi6
垢版 |
NGNG
ttp://www.fenix.ne.jp/~G-HAL/soft/nosettle/ の真ん中より少し下
>>461のサイトね。VIAに限らず使えるんじゃないかと邪推。
それよりttp://hp.vector.co.jp/authors/VA009278/amd64/ の下1/3くらい。
不具合がまだあるみたい。対処方法は書いてあるけど眠いからパスw
0468じじぃ その4 ◆HETAREzfq.
垢版 |
NGNG
>>467
なんかopteronの場合はBIOSがPowerNow!をCool'n'Quietと誤認識しるらすい、
Cool'n'Quiet自体は存在せん模様


dually nForce Pro 2200 マザーボード・トリオを比べる
Asus K8N-DL, Iwill DK8ES, Tyan Thunder K8WE
(略)
(5ページ目)
K8WE, DK8WSのBIOSにはオーバークロック用のものはないが、
(略)
PowerNow(BIOS上の表示はCool'n'Quiet)と組み合わせれば、アイドル時の静穏化
http://mypage.odn.ne.jp/www/k/8/k8_hammer_trans/files/Hammer-Info.html


で、PowerNow!は夏に出る6-currentにはそれ用ドライバ標準装備だとかなんとか、
おらにはサパーリわかりませぬが。。
0469root▲ ★
垢版 |
NGNG
○ 5月20日24:00前に発生した、XOロケーションにおける電源トラブルについて

Jimさんからの報告によると今回のトラブルの原因は、tigers、tiny tigersと
高性能スイッチに電源を供給している電源系統のオーバーロード
(使用許可容量超過)による、安全ブレーカーの断であった、とのことでした。

PIEに限らず一般的にデータセンターでは、通常このようなことが起こらないように、
各サーバやスイッチの消費電力を計算したうえで、1つの電源系統から
過剰に電源をとらないように、電源の配置をあらかじめ考慮しておくわけですが、
今回、「後付」でCPUを追加したため、1台あたりの消費電力が
当初の想定よりも大きくなり、それが6台分積み重なったことで、
電源のオーバーロードが起こってしまったわけです。

ではなぜtiny tigerをつないで動かし始めた時点でオーバーロードが発覚しなかったのか、
という点についてですが、これはあくまで私の推測ですが、たぶん該当の電源系統は
CPUを増設した時点ではたまたま「オーバーロードになるぎりぎり一歩手前の状態」
になっていたのでしょう。

で、その状態で日本が23:00を迎え、いつものようにlive20やnews19やgame10や
hobby7へのアクセスや書き込みがピークを迎え、携帯サーバやBlackGoatへの
アクセスがピークを迎えることで各サーバの消費電力が増し、
24:00のMAX値のところで「バチン」と、安全ブレーカーが働いたのだと、推測されます。

で、Jimさんたちは改めて現在の消費電力を見積もりなおし、各サーバ・スイッチの電源を
再配置することで、問題を解決したようです。

以上、原因を隠しておく方が信頼度が下がると判断し、
私の判断で状況を正直ベースで書くことにしました。
0470root▲ ★
垢版 |
NGNG
つまりまとめると、

1) 今回のトラブルの原因は、ヒューマンエラーであった
2) Jimさんたちは、今回の件により、ひとつ経験を積んだ
3) 運良く、ハードウェアや掲示板のデータそのものには、障害は発生しなかった
おまけ) ex10やetc4やqb5は、たまたま場所・電源ともに別系統だった

ということになります。

私は、今回の件については、きちんと「原因」を報告してくれたことと、
上記の「3)」と「おまけ」の部分にめんじて、今回限りという条件つきで、
許すことにしました。

ということで、game10 / hobby7 / news19 / live20 のユーザの方々、
また携帯系サーバのユーザの方々には、たいへんご迷惑をおかけいたしました。

以上です。
0472 ◆f0.zuburi6
垢版 |
NGNG
確かCnQ自体はPowerNow!の延長線上のモノだったと思ったのでそういう扱いになるかもですね>BIOS
いづれにせよ対応待ちっすねー>>468

>>469 おつですー少し補足しますー
>動かし始めのオーバーロードが出ない件
負荷の変動による電力増加も勿論あると推定します。その上で,
ブレーカーというものは,大抵の場合,100%の負荷でも遅延動作で落ちる事があります。
例えば1時間とか。
95%位でも2〜3時間で落ちるコトが有ります。そういう仕様・特性なのですー
0473動け動けウゴウゴ2ちゃんねる
垢版 |
2005/05/21(土) 10:42:00ID:6YOiEvoF0
>>441
でしょうねー、というかまだあまり枯れきっていないし、
なによりOSのジャンプは人間パワーが必要ですから。

>>472など
ちなみに昨今のコンピュータは動かし始めや
今回のトラブルの引き金になったようなフル稼働時が一番電気を食います。

参考までに↓
質問・雑談スレ161@運用情報板
http://qb5.2ch.net/test/read.cgi/operate/1116584807/941
0474root▲ ★
垢版 |
NGNG
>>472
遅延動作ですか。なるほど。

>>473
実はSunOSは本業方面では3.5あたりから入って、4.xとかSolaris2.3〜2.6あたりまでは
使い倒した(NIS+とかもいちから使ったし、/etc/systemもいじり倒した)のですが、
もう概ね、忘れてるですね。

当時はAdrian Cockcroftの書いた本とかドキュメントとか、読みまくっていました。
これか。
http://www.amazon.com/exec/obidos/tg/detail/-/0131496425/qid=1116640502/sr=1-2/ref=sr_1_2/002-3909485-2440034?v=glance&s=books

だって、みんな無茶苦茶するんだもん。
0475動け動けウゴウゴ2ちゃんねる
垢版 |
2005/05/21(土) 14:59:55ID:6YOiEvoF0
>>474
Sun/Solaris使いだったのは過去の投稿で知ってます

> だって、みんな無茶苦茶するんだもん。

当時はclassicでしたっけ。無茶に敢然と堪えられるsparcとSolarisすごすぎかと。

ただスピード競争にはおいてかれてしまい、
Sparcなワークステーションはもう出ることはないでしょうね。
所属先から支給されているblade150/650MHz使ってますが、体感的にあまり早くないですし・・・

ちなみに最近荒らし対策(違)で流行してるサーバベースコンピューティングは
こないだの某社買収もあってSunの独走状態で、sparcは今後こっち路線っぽいですね

・・・とチラシの裏してみますた、スマソ
0476root▲ ★
垢版 |
NGNG
新サーバへの移行が完了しましたので、以下の削除をお願いします。

(削除)
+c-docomo2.2ch.net:206.223.151.215
+c-docomo3.2ch.net:206.223.151.210
+c-docomo4.2ch.net:206.223.151.200

で、これらのサーバの携帯用ラックからの移動手配についてはどうしましょうか。
問題なければ、私からJimさんとSeanさんにその旨連絡とります。
0477資材二課 ★
垢版 |
2005/05/21(土) 15:12:48ID:???0
>>476
DNS: 要請だしました。
移設 : わたしがコントロールしますー、(すこしだけ寝かせてから)
0479資材二課 ★
垢版 |
2005/05/21(土) 15:21:01ID:???0
この三台の移設ですが、

1) IP が変わってもok ?
2) 再インストールは必要?
0480root▲ ★
垢版 |
NGNG
>>477
了解です。

・移動対象サーバは cobra2244 cobra2246 banana704(= cobra2247)
(PIE内部では、cobra2247 は banana704 というラベルで管理されているようです)
・移動後の接続速度は100Mbpsで問題なし
・プライベート側 I/F の接続は不要

と、PIE方面にお伝えください。
0481root▲ ★
垢版 |
NGNG
>>479
1) 変わっても問題ありません。
2) してもらったほうが、都合がいいかも。

これから、システムのフルバックアップをとっておきます。
0482資材二課 ★
垢版 |
2005/05/21(土) 15:24:56ID:???0
了解です

バックアップおわったら、お知らせくださいー
たぶん移設は来週かと
0483root▲ ★
垢版 |
NGNG
cobra2244, cobra2246, cobra2247 バックアップ完了しました。
移設・再インストールしていただいて OK です。
0485root▲ ★
垢版 |
NGNG
さて、ぼちぼち oyster243 のセットアップはじめるです。
BBQの二重化へと。
0486動け動けウゴウゴ2ちゃんねる
垢版 |
2005/05/23(月) 00:27:02ID:emXzPc4Z0
もいもら

cobra244 (3G -> 4G) ex12.2ch.net (soccer関連全部)
cobra246 (2G -> 4G) ex13.2ch.net (base関連全部)
cobra247 (2G -> 4G) live21.2ch.net (live15から全部移転)

Tiger2513 ex11.2ch.net (vipのみ)
Tiger2514 anime.2ch.net (anime関連全部)

二週間くらいで出来上がるかな?
■ このスレッドは過去ログ倉庫に格納されています

ニューススポーツなんでも実況