X



トップページ運用情報
1001コメント297KB

【Project peko】2ch特化型サーバ・ロケーション構築作戦 Part14

レス数が950を超えています。1000を超えると書き込みができなくなります。
0001root ★
垢版 |
04/06/20 02:40ID:???
peko作戦について語るスレです。
サーバの新ロケーション、PIEに関する話題もこちらで。

現在の主要なテーマは、
・新ロケーション、PIEの安定化
・pekoサーバ突然死の原因究明
となります。

レンタルサーバー maido3.com 2ちゃんねるの転送量: http://server.maido3.com/pie/
MRTGによる統計情報: http://mumumu.mu/mrtg/
2ちゃんねる/PINKちゃんねる 稼動中のサーバ一覧: http://mumumu.mu/serverlist.html

PINKちゃんねるで現在進行中のama作戦については、こちら。

【Project ama】PINKちゃんねる特化型サーバ構築作戦 Part2
http://qb3.2ch.net/test/read.cgi/operate/1082721809/l50

携帯電話特化型サーバ構築作戦については、こちら。

【Love Affair】携帯からのアクセスに対する考察・次の一手 Part1
http://qb5.2ch.net/test/read.cgi/operate/1075887465/

前スレ
【Project peko】2ch特化型サーバ構築作戦 Part13
http://qb5.2ch.net/test/read.cgi/operate/1085678587/
0851root ★
垢版 |
04/08/14 02:01ID:???
>>848
このところ特によく落ちたので、シングルCPU設定に一時的に変えているせいですね。(>>821 >>824)

シングルCPU設定だとマシンが落ちることはありませんが(LA=600とかなっても落ちない)、
Cobraサーバの場合、半分以下のパフォーマンスしか出ないようです。

これまでのgame6等でのCobraサーバの不安定の原因も、
マルチプロセッサモードでの動作の問題ということで、ほぼ間違いないようです。

これがFreeBSDのバグなのか、サーバのBIOSの問題なのか
(BIOSの更新で直る場合があったらしい)、
あるいは他の原因なのかは、まだわかっていません。

なお、Tigerサーバも同じ傾向の模様(少なくともex7では)であったため、
現在Cobraサーバ同様にシングルCPU設定になっています。

Tigerの場合Cobraほどの激しい性能低下はないみたいですが、
FreeBSD 4.x/HE.NET時代のパフォーマンスは、出ていないです。
0852root ★
垢版 |
04/08/14 02:03ID:???
オリンピックに向けて、
落ちてもその都度リブートをすればいいということで、
マルチプロセッサモードに設定してみますか?>live8/live16/live17

そうすれば、今の倍以上はいけるはず。
0853root ★
垢版 |
04/08/14 02:08ID:???
補足:

携帯用サーバ、BBQ/dnscacheとして使用しているCobraサーバは、
マルチプロセッサモードで動いています。

しかし、BBQ/dnscacheサーバは一度も落ちていないし、
携帯用サーバも、それほど頻繁には落ちていない。

特にread.cgiとの相性が悪い模様。
0855未承諾広告※ ◆TWARamEjuA
垢版 |
04/08/14 02:16ID:RvRv/xNh
>>854
perlcc を通した read.cgi という手もあるかもしれないですね。
perlcc された bbs.cgi の実績からして。

read.cgi も configure が付いていると、もうちょっと柔軟にコンパイル出来るのかな?
0857root ★
垢版 |
04/08/14 02:18ID:???
>>855
ん、Cバージョンをやめると言っています?
0858root ★
垢版 |
04/08/14 02:26ID:???
あとは、read.cgiについてmod_cgidsoを入れてみるという手は、あるかも。
0859 ◆cZfSunOs.U
垢版 |
04/08/14 02:29ID:eAK3Pg3b
>>858
それやるのなら,一応作者なんでサポートします......
0861ひろゆき@どうやら管理人 ★
垢版 |
04/08/14 04:12ID:???
バイナリでも毎回起動コストがかかるCと、
メモリに常駐するPHPだと、PHPのほうがよかったりするのかな、、、
0863ひろゆき@どうやら管理人 ★
垢版 |
04/08/14 04:27ID:???
おぉ、すばらしい。。
これって、mod_cgidsoの入ってないサーバでは、
単なるバイナリとして動くんですか?
0864 ◆cZfSunOs.U
垢版 |
04/08/14 04:31ID:eAK3Pg3b
>>863 mod_cgidso に対応するバイナリは通常の実行ファイルじゃなくて
共有オブジェクト(Windows でいえば DLL のようなもの)なので,
それ単体では実行できませんので,mod_cgidso が入ってなければ
従来の CGI を使ってもらうことになります......
0865ひろゆき@どうやら管理人 ★
垢版 |
04/08/14 04:33ID:???
google先生に聞いてもほとんど情報がなかったんですが、、、
0866 ◆cZfSunOs.U
垢版 |
04/08/14 04:35ID:eAK3Pg3b
>>865 まぁ,積極的にプロモーションしてるものでもないので......
0869 ◆cZfSunOs.U
垢版 |
04/08/14 05:14ID:eAK3Pg3b
>>867 (w
まぁ,mod_cgidso 作成の経緯は,元々 read.cgi 改良の目的の一環としてと
いうことだったので,その意味では 2ch 発祥であるとはいえるかと......
0870ひろゆき@どうやら管理人 ★
垢版 |
04/08/14 05:38ID:???
おぉ、、そだったんですか、、、
0872▲:/usr/local/bin/ch2 -o i686 ◆P8fXJj6wwo
垢版 |
04/08/14 10:15ID:eiBBWcnt
mod_cgidso+改良read.cgiで直ったりして・・・

>>855
automakeとautoconfつかえば作れるはずです。
設定ファイルを多少書く必要がありますが。

参照:autoconf / automake を使ってみよう!
ttp://shimaki-hp.hp.infoseek.co.jp/autoconf/book1.html
0874留守番 ★
垢版 |
04/08/14 18:01ID:???
>>869
もしよろしければメールいただけると嬉しいです。

yakin@80.kg
0879root ★
垢版 |
04/08/15 21:36ID:???
とりあえず目に付いた >>861 だけ。

んと、いわゆる中間コードをキャッシュするしくみ(PHP Acceleratorのような)を入れないと、
毎回コンパイルがかかるので、PHPのほうが不利ですね。
(乱暴に言ってしまうと、Cで言うと毎回gccが動くようなもの)

PHP Acceleratorはc系のフロントエンドにも入れてあります。効果はかなり大きいですが、
特にamd64系で、たまに挙動不審になることがあるみたい。
0880留守番 ★
垢版 |
04/08/15 22:10ID:???
所詮インタプリタはインタプリタかと、
0882留守番 ★
垢版 |
04/08/15 22:19ID:???
機動性ではインタプリタだけど、、、
0883▲:/usr/local/bin/ch2 -o i686 ◆P8fXJj6wwo
垢版 |
04/08/16 10:27ID:sGZaJDbi
PHPはZend Optimzer使えばまだましな模様。
ちなみにフリー。
ttp://www.zend.com/store/free_download.php?pid=13

ソース:PHP-USER-JP ML
ttp://ns1.php.gr.jp/pipermail/php-users/2001-July/000883.html
0884root ★
垢版 |
04/08/16 10:55ID:???
>>883
PHP関連はc系列でいろんなものを実地に試してみて、
結局APC Acceleratorが一番効果あったので、それにしていたりします。

Zend Optimizerも試してみましたが、それなりに効果あるものの
APC Acceleratorとの併用ができないみたいでした。

これとか、
http://www.php-j.com/tutorial/php/phpA.php
0885▲:/usr/local/bin/ch2 -o i686 ◆P8fXJj6wwo
垢版 |
04/08/16 14:47ID:sGZaJDbi
>>884
あらら、既に検証済みでしたか、スマソです。
公式メンテナの最適化ツールより効果ありとはね・・・

これ以上やろうとするとバイナリ化でしょうけど、Zend Encorderは高い・・・。
そこでperlccのphpバージョンが無いか探したらこんなんみつけました。

PHPCC ttp://www.phpcc.net/

ただ、サイトがドイツ語なんですけど。。。
0886動け動けウゴウゴ2ちゃんねる
垢版 |
04/08/16 14:52ID:sGZaJDbi
>>885
あ、それ以前に
・Zend encoaderはFreeBSD非対応。。。
・phpccはDLに要登録っぽい
0887root ★
垢版 |
04/08/17 10:35ID:???
9月頭に、つかの間の夏休みを米国西海岸で過ごそうと算段中。
休みの都合で、2泊4日の強行日程だったりして。

完全プライベートなので、今回はこないだの5月よりはまとめて確保できると思っていますが、
滞在中に現地で可能な作業としては、何があるかなと。

- Cobra, TigerのBIOSの更新
- リモートコンソール関連作業
- ちょっと強気なOS(current., snap, beta等)を入れてみる

あと他には↓
0890犬野ぽち
垢版 |
04/08/17 12:31ID:tMSBYMCs
> 887
>
> - ちょっと強気なOS(current., snap, beta等)を入れてみる

FreeBSD5/Netnice。

9月頭であれば、現地までお伺いして作業を手伝わせて頂けまつ。
といっても、まず、パッチを作らなければダメですけれども。

今の予定であれば、9月までにはなんとか...。
0891root ★
垢版 |
04/08/17 14:54ID:???
これ、今の2chでdual CPUでシステムがハングアップしてしまうことと関係あるんだろうか。
今はオフ(FreeBSD 5.2.1のデフォルト)、currentではオンになっているようにみえる。

# ADAPTIVE_MUTEXES changes the behavior of blocking mutexes to spin
# if the thread that currently owns the mutex is executing on another
# CPU.
options ADAPTIVE_MUTEXES
0894root ★
垢版 |
04/08/17 15:38ID:???
>>892-893
もうちょっと調べてみてから、ex7で実験してみますか。
0895見習い▲ ★
垢版 |
04/08/17 15:59ID:???
tiger509 , 510
到着しました

tiger509 = news19.2ch.net with ジンギスカン予備工事
tiger510 = hobby7.2ch.net with ジンギスカン予備工事

でお願いしますー
0898root ★
垢版 |
04/08/18 05:01ID:???
ということで、

# ADAPTIVE_MUTEXES changes the behavior of blocking mutexes to spin
# if the thread that currently owns the mutex is executing on another
# CPU.
options ADAPTIVE_MUTEXES

の機能を有効にして、

# MUTEX_WAKE_ALL changes the mutex unlock algorithm to wake all waiters
# when a contested mutex is released rather than just awaking the highest
# priority waiter.
options MUTEX_WAKE_ALL

の機能をcurrentから5.2.1Rにバックポートしてみた。

ex7でSMPをオンにして実験開始。さてどうなるか。
0899root ★
垢版 |
04/08/18 13:46ID:???
さて、儀式いきます。
以下をDNSに追加お願いします。

+news19.2ch.net:206.223.152.65
+hobby7.2ch.net:206.223.152.70
0900見習い▲ ★
垢版 |
04/08/18 13:58ID:???
>>899

done
0909root ★
垢版 |
04/08/18 22:45ID:???
デュアルCPU設定だと、全然強さが違うなぁ。< ex7
さくさくだ。

>>898 が当たりであることを心底から祈っちゃうなぁ。

でも、デュアルCPU(SMP)問題であることがほぼ間違いなくなり、
かつFreeBSD 4.xでは顕在しなかった部分だとすると、
5.xで導入されたmutexまわりというのは、そんなにセンス悪くないような気がするんだけど。
0910root ★
垢版 |
04/08/18 22:46ID:???
そういっているうちに、、、。
0912名無し薬学君 ◆KusuriJBSQ
垢版 |
04/08/18 22:59ID:NzwRnw38
    ▼ハヽヽ▼
/|\( ´ Д `) <人柱人柱んぁんぁ♪
⌒⌒''(U 後 )  
  ▼〜し'~し'
0914root ★
垢版 |
04/08/18 23:09ID:???
やっぱ、ハングした瞬間をDDBとかでとらえられないと、手がかりがなぁ。
そうすると、やはりリモートコンソールってことになるのか。

とりあえず
「デュアルCPU設定だと死ぬ」「同一ハードでもシングルCPU設定なら死なない」
「ACPIは落ちることには関係ない」(以上amd64/i386双方とも)
「options SMPでも、device.hints的にAPICを切れば死なない(amd64の場合)」
「負荷にはあまり関係がないらしい」
というところまで絞れたわけで、全く停滞しているわけではないけど。

で、どうも、プロセスが多く起動・終了されるマシンで、落ちる可能性が上がるように見える。
携帯サーバで使えばLA=50でも死なないのに、掲示板サーバだとLA=2でも死ぬ。
0915root ★
垢版 |
04/08/18 23:20ID:???
そんなわけで、やはり原因はハードウェアの不良ではなく、
ソフトウェア的問題である可能性が濃厚と。

Googleするとこんな記事があったけど、そんなことあるのかなぁ。

Re: 5.2.1-p9 kernel hang (unknown reason, but more info)
http://lists.freebsd.org/pipermail/freebsd-smp/2004-August/000588.html
>
> In my opinion, it was kern.ipc.nmbclusters causing the problem.
> now I've set it as default: kern.ipc.nmbclusters: 25600
0916root ★
垢版 |
04/08/18 23:31ID:???
次上がったら、>>915 にあるように kern.ipc.nmbclusters 等の値をデフォルトに戻してみるか。< ex7
0917名無し募集中。。。
垢版 |
04/08/19 00:46ID:HoD+Kagj
新しい技術に挑戦する心意気はいいとおもうけど
人が多いところでわざわざ実験やる意味がわからない 
嫌がらせですか?そうですか・・・ なんて嫌味もいいたくなる・・・

まぁとにかく頑張ってなおしてくらはいな シクシク
0919ょぅι゙ょたん
垢版 |
04/08/19 00:56ID:gJ1tPPsO
そうやって文句を言ってくれると隔離鯖に押し込んだ甲斐があるというものだ
0920名無し募集中。。。
垢版 |
04/08/19 01:00ID:HoD+Kagj
ヽ(`Д´)ノウワァァァン みんながいじめるぅ・・・
0922名無し募集中。。。
垢版 |
04/08/19 01:10ID:HoD+Kagj
人が多いってことは、広告収入源でもあるんじゃありません?
(専用ブラウザ率は多いかもしれないけど)
そういうところの稼働率は高く維持しないとって普通は考えるとおもうんだけど
0926名無し募集中。。。
垢版 |
04/08/19 01:33ID:HoD+Kagj
>>924
2chの収入源とか気になってたんだけど、
人の多い実況とか、狼とかで 
300レスに1レスくらい広告を挿入すればどう?
このくらいなら文句も出ないと思うけど
0927名無し募集中。。。
垢版 |
04/08/19 01:46ID:A8UDCjpT
( ^▽^)<記念カキコ
0928ょぅι゙ょたん
垢版 |
04/08/19 01:47ID:gJ1tPPsO
どこかの企業から金を貰って、ライバル企業を貶めるという
逆CMというビジネスモデルを思いついた
0931名無し募集中。。。
垢版 |
04/08/19 03:16ID:HoD+Kagj
動きが無いのが心配ですが、
復旧がんばってください
ちょっともんくいっちゃいましたが、よろしくお願いします
0932動け動けウゴウゴ2ちゃんねる
垢版 |
04/08/19 03:33ID:vL4UG0C1
難民板の惨状ってオカシクねえか?
だいたい普段から常駐してるヤツらの方が板違いだし

管理サイドが板の設定をゆるくしてるんだから
それに見合った使い方をしてくれってことだろ
0933動け動けウゴウゴ2ちゃんねる
垢版 |
04/08/19 03:37ID:mH9G4qxV
OpenBSDでDualCPU実験希望......
0935動け動けウゴウゴ2ちゃんねる
垢版 |
04/08/19 11:45ID:uUj/PDXt
>887
レイヤーの高い人の承諾があれば

BSD4.0withTigerでdualの性能をば・・・・
と後戻りちょっとしてみるテスト

といっても、新規導入じゃないと、どうにゅうにもならないのか・・・ナ
0936root ★
垢版 |
04/08/19 11:57ID:???
さて、次の一手は。

>>915 あたりを試してみるか。
でも、携帯用サーバ関連のほうが優先度高いかも。
0937root ★
垢版 |
04/08/19 13:36ID:???
6-CURRENTができて、RELENG_5ができたのかな。
0938見習い▲ ★
垢版 |
04/08/19 14:10ID:???
今の私の目標は
http://ch2.ath.cx/load/
ここのグラフで終日全サーバグリーンだったり、
0940root ★
垢版 |
04/08/19 22:45ID:???
今日は本業が泣ける状態だったりするけど、
自分の手元のマシンにRELENG_5を入れてみたりして。

RELENG_5_2→RELENG_5への更新手順のとても適当なメモ
Version 1.0 2004/8/19 root ★

・Apache等のサービスを落とし、かつ自動で上がらないようにする
・/etc/rc.conf的にkern_securelevel関係を一時的にコメントアウト
・rm -rf /usr/obj
・/usr/src/sys/{i386,amd64}/GENERICからWITNESSとかDDBとかコメントアウト
・vi /usr/src/standard-supfile して、CVSタグをRELENG_5_2からRELENG_5に
・cd /usr/src; make update
・make buildworld
・make buildkernel
・make installkernel
・リブート
・dmesgを確認、保存
・cd /usr/src/usr.sbin/mergemaster; make -m /usr/src/share/mk all install
・mergemaster -p
・make installworld
・mergemaster
・リブート
・dmesgを確認、保存
・kernelカスタマイズ
・リブート
・dmesgを確認、保存
・kern_securelevelを元に戻す
・リブート
・Apache等のサービスを上げて動作確認してみる
・サービスを動作確認して問題なければ、自動で上がるようにする
・最終リブートテスト
0941root ★
垢版 |
04/08/19 22:54ID:???
あとは、
・前の/usr/src/sys/{i386,amd64}/GENERIC をとっておいて比べてみる
・/usr/src/UPDATING に目を通す
・/usr/src/sys/conf/NOTES に目を通す

ぐらいか。

もうすこししごとしてからかえろう。しくしく。
0942root ★
垢版 |
04/08/19 22:57ID:???
あ、あと、
net.inet.tcp.inflight_enable=1 はいらないみたい。
で、net.inet.tcp.inflight.enable にかわっているみたい。
0943root ★
垢版 |
04/08/19 23:14ID:???
>>940 をex7とlive8あたりで試してみたい気もするけど、
たぶんそれはPIEに行った時だなぁ。

さて、ぼちぼちかえるかな。
0945 ◆BFzK/mtqM2
垢版 |
04/08/20 01:48ID:c3PSlkeW
RELENG_5をcvsup中〜
結構時間かかるし、cvsサーバ混んでますね。
0946動け動けウゴウゴ2ちゃんねる
垢版 |
04/08/20 05:59ID:AIXTY3vg
allbsdとかもつかえるよ。
あとcvsup-mirrorを一つ建てて置いて管理下のサーバーはそこにcvsupするようにするのが吉。
0947 ◆BFzK/mtqM2
垢版 |
04/08/21 02:19ID:0otBbvOX
うーん、uname -rすると、5.3 ALFHAになるぞ
まだ、5-STABLEは先かな?
0948root ★
垢版 |
04/08/21 13:49ID:???
>>947
さっきCVSupしたら5.3-BETA1になった。
PIEに行く頃にはどうなるかなと。

# めしいってくるか。
レス数が950を超えています。1000を超えると書き込みができなくなります。

ニューススポーツなんでも実況