X



トップページ運用情報
1001コメント315KB
【Love Affair】携帯からのアクセスに対する考察・次の一手 Part1
■ このスレッドは過去ログ倉庫に格納されています
0001FOX ★
垢版 |
04/02/04 18:37ID:???
日増しに増加する携帯からのアクセス。
かつて、羨ブラが生まれたように何かが生まれないと
ならない気がする。

たぶん解決策は、時間を売って空間を買うだと思うけど
いろいろ考察して、次の一手を決めようかと、

Love Affair 作戦。
Part1 マーリンルージュ
0768マァヴ ◆jxAYUMI09s @マァヴ ★
垢版 |
04/06/27 00:19ID:???
>767
log取るの?(^_^;)read要求専用なのに・・・・
一時的に取ることはあるとしても、恒久的にとり続ける必要ないと思うんだけど。
0769見習い▲ ★
垢版 |
04/06/27 00:20ID:???
目的が log 取りというのは今一かも < 理由
0770マァヴ ◆jxAYUMI09s @マァヴ ★
垢版 |
04/06/27 00:22ID:???
DISK書き込みが頻繁にあるならSCSIの方がええと思うけど・・・・
UNIXのことはよくわからんのですが、一度立ち上がっちゃえば
SWAPとかPageとか発生しない限り、ほとんどアクセスなくなるってもんでもないのかな?
0771root ★
垢版 |
04/06/27 00:26ID:???
ログもさることながら、ページングとかシステム全体のパフォーマンスですね。
ログ収集は全く目的ではないので、目的の本質じゃないし。
0772見習い▲ ★
垢版 |
04/06/27 00:27ID:???
んじゃ 36G x2 でいいとおもいまーす
三本目はいらない
0773マァヴ ◆jxAYUMI09s @マァヴ ★
垢版 |
04/06/27 00:30ID:???
RAIDにシステムののっけちゃうってこと?
ま、最初はそんなもんかなぁ・・・・
キャッシュ量がどんくらい必要になるかとか、やってみないとわかんないし(^_^;)
0774root ★
垢版 |
04/06/27 00:32ID:???
UNIXの場合、ページングは頻繁に発生しますね(そういうものです)。
で、システムディスクはアクセス量は少ないですが高速アクセスが必要なので、
下記構成がいいかなと。これだと、カードは1枚で済むので。

(構成1)
SCSI RAID card
|       |
system   data
disk     disk #1

data
disk #0
0775root ★
垢版 |
04/06/27 00:34ID:???
>>772-773

2本にするのでもいけますかね。
>>774 のsystem diskがなくなるかんじですか。

つまり、72Gのでかいディスクがあるつもりでシステムを組むのか。
コストとのバランスでは、悪くなさそうかも。
0776root ★
垢版 |
04/06/27 00:36ID:???
で、万一バックエンドがあぼーんしたら、しばらくはフロントだけで動かす(今の状態)と。

そういうサービスレベルで動かすのであれば、RAID 0にシステムものっけるのが
パフォーマンス的にも悪くないと思います。なにより、構成がシンプルになるし。
0777マァヴ ◆jxAYUMI09s @マァヴ ★
垢版 |
04/06/27 00:37ID:???
ぅぃぅぃ(^_^;)んじゃこんな感じかな?
BlackGoat
Mother bord Xeon Dual Type , 64Bit PCI
CPU Xeon 2.8G x 1
Mem 4GB
HDD SCSI 15krpm 36GB x 2
DISK Controller Adaptech 2200S 2ch Ultra320 64Bit PCI RAID 64MB(あるいはLSIの同等品)
NIC Intel Pro1000 x 2 (onboad LAN がintelなら、それでもよし)
0778見習い▲ ★
垢版 |
04/06/27 00:37ID:???
ご確認をば、

1) まず 36Gx2 を基本とします
2) 高速性を追求するかめにストライピングします。
3) システムも高速がいいので、これでokです

ってこと?
0779マァヴ ◆jxAYUMI09s @マァヴ ★
垢版 |
04/06/27 00:38ID:???
>776 >778
いいかんじだと思いますー(^_^;)

つか、考えて見ればストライピングしてるから
72GBなんですねー(^_^;)わすれとった
0781見習い▲ ★
垢版 |
04/06/27 00:40ID:???
りょうかい りょうかい
0783見習い▲ ★
垢版 |
04/06/27 00:43ID:???
はい ハイ
0784root ★
垢版 |
04/06/27 00:49ID:???
>>777
概ねそんなところですね。< 構成

onboard LANはBroadcomのでも問題ないです(pekoサーバはBroadcomのGigaもの)。
というか、普通のXeonマザーなら通常いまいちなカードは入ってないと思われ。
0787動け動けウゴウゴ2ちゃんねる
垢版 |
04/06/27 00:57ID:81f5EUwW
LAが馬鹿高くなっている携帯向けサーバではMaxClientsとかを
もっと小さくした方がよさげ。というか、どう考えてもネットワーク
がボトルネックになるはずなのにLAが上がるってことは、
スラッシングしてるってことなので、同時接続数を増やすのは
誰の得にもならんですよ。
0788見習い▲ ★
垢版 |
04/06/27 00:59ID:???
>>787
BlackGoat が投入されて始めて
今回の目標とする機器ょ含めたシステムが出来上がるのに
今を観察して対策するというのに何の意味があるか解りません。

作業は完成後となるでしょう
0790root ★
垢版 |
04/06/27 01:03ID:???
>>787
MaxClientsを小さくすると、遅い携帯さんがコネクションを握ってしまうので、
全くつながらなくなるですね。
(前のcの頃にかなりこのへんはそうとう試行錯誤しました)

同時接続数は逆に増やしたいぐらいです。
0791見習い▲ ★
垢版 |
04/06/27 01:03ID:???
>>789
その予定
0792root ★
垢版 |
04/06/27 01:03ID:???
で、LAが上がる原因は、キャッシュディスクに対するI/O処理だと思うですね。

証拠としては、メニューが出るところまでは比較的高速ですが、
subject.txtを参照するところでぐっとおそくなり、スレ本体を持ってくるところで
さらに遅くなっています。

で、こいつをバックエンドサーバを入れることで、
フロントエンドから追い出そうというのが、今回の目的かと。
0794動け動けウゴウゴ2ちゃんねる
垢版 |
04/06/27 01:42ID:81f5EUwW
>>792
うへ、バッファキャッシュとかほとんど効かないってことですね。
というか、さすがに携帯からの全てのアクセスを受け持つと、
アクセス対象が分散されすぎってことですね。
恐っ。
0795root ★
垢版 |
04/06/27 01:50ID:???
>>794
そういうかんじです。

で、巨大メモリ・高速ディスクなバックエンドを準備しようっていうのが今回の眼目で。
0796見習い▲ ★
垢版 |
04/06/27 01:51ID:???
それでどうなるですかねー
目論み通りに行くのか?
予想よりも素晴らしい結果を残すのか、
はたまた、撃沈か・・・
0797root ★
垢版 |
04/06/27 01:54ID:???
あとは見ていると、PHPの処理に時間がかかっている気がします。

あ、そうか、フロントは前のcと違ってi386なんだから、あれを入れるといいかも。
ちょっと試してみるか。
0798見習い▲ ★
垢版 |
04/06/27 01:55ID:???
>>797
ああーっ

折角重い状態をあえて作ったんだから・・・
0800root ★
垢版 |
04/06/27 01:56ID:???
>>798
いや、たぶん入れても焼け石だと思うですよ。
I/Oの改善はこれ以上無理だから。
0801桶屋
垢版 |
04/06/27 02:00ID:4DoI9Grs
楽天を10倍速くしたヤツですね。
0802未承諾広告※ ◆TWARamEjuA
垢版 |
04/06/27 02:00ID:0HkIeDI4
>>799
php のバージョンが一致しないようですけれども大丈夫なのかな?@現状は 4.3.6 かな?(最新は4.3.7)
0803桶屋
垢版 |
04/06/27 02:01ID:4DoI9Grs
ごめんなさい。あっちは別のプロダクトだった(商用)
0804root ★
垢版 |
04/06/27 02:03ID:???
>>802
お、そういう問題があるのか。
まずはダウンロードしたやつを読んでみるです。
0805root ★
垢版 |
04/06/27 02:07ID:???
c-othersに入れてみた。
0806root ★
垢版 |
04/06/27 02:11ID:???
問題なさそうなので、c-auに入れてみます。
入れる作業もままならないぐらい重いので、
いったんhttpd落とします。
0810root ★
垢版 |
04/06/27 02:17ID:???
うそみたいにレスポンスがいい気がする。< c-au
0811root ★
垢版 |
04/06/27 02:21ID:???
c-docomo、これから作業します。
いったんhttpd落とします。
0815root ★
垢版 |
04/06/27 02:25ID:???
この呪文は効果あった模様。
これバックエンド入れれば、鬼に金棒ということで。
0816root ★
垢版 |
04/06/27 02:30ID:???
I/Oもさることながら、時間かかってたのはPHPの処理かぁ。
しかし、Zend Optimizerおそるべし。
0817見習い▲ ★
垢版 |
04/06/27 02:31ID:???
んじゃ様子見て明日の午後にでも
もう少し r.i p.i 止めてまた重い状況作りますー
0818root ★
垢版 |
04/06/27 02:36ID:???
>>817
了解です。
c-docomoはそれでもこんなかんじなので、
また早晩限界を迎えるでしょう。

C.W._WWWWCC.W__WWWWWWWWWW_WWWWW.W.WWWWWWWW__WWWWWWWWWW.W.WWWW_.W
_WW.WWWWWWWWWWCWW.W_WWWW__WW.WW_WW_WWWWWWWWWW.WWWWWW.WWWW_WWWW_.
WWW.............................................................

しかし、フロントエンドを高速化できたということは、
今後を考えるとよかったかなと。
0819見習い▲ ★
垢版 |
04/06/27 02:38ID:???
>>818
ですね、
0821root ★
垢版 |
04/06/27 04:18ID:???
なんだかもっと効果がありそうな呪文を見つけたので、
今c-docomoに入れてみた。
http://www.php-accelerator.co.uk/download.php

最初に入れた呪文の有償版と同じぐらい効果があって、しかも無料だそうな。
とりあえずこれで様子を見てみるか。
(比較のためにあえてc-au/c-othersは今のところそのまま)
0823root ★
垢版 |
04/06/27 04:19ID:???
めちゃくちゃ効果あったような気がする。< c-docomo
0824root ★
垢版 |
04/06/27 04:20ID:???
LAが1点台になった。< c-docomo
%uptime
12:20PM up 2 days, 14 mins, 1 user, load averages: 1.10, 3.31, 15.25
0826root ★
垢版 |
04/06/27 04:24ID:???
その後徐々に上がってきたけど、安定してる。
%uptime
12:23PM up 2 days, 18 mins, 1 user, load averages: 2.29, 2.86, 12.55

で、今c-auにも入れてみた。
0827root ★
垢版 |
04/06/27 04:29ID:???
c-auは1点台の前半になった。c-othersにも入れた。
%uptime
12:29PM up 4 days, 52 mins, 1 user, load averages: 1.28, 2.19, 3.03
0829root ★
垢版 |
04/06/27 04:43ID:???
今日以降の重い時間がみものということで。
0831動け動けウゴウゴ2ちゃんねる
垢版 |
04/06/27 10:33ID:a7RouA6D
作業お疲れさまです。
c.2ch.netの機能は至れり尽くせり最高Goodなので、
夜間の速度的な問題が解決されたら言うことなしです。
0832root ★
垢版 |
04/06/27 14:07ID:???
c-docomoだけ、MaxRequestsPerChildを100から1000にしてみた。
でもまぁ、焼け石に水ってかんじで。

まじないのおかげで昨日までよりは相当ましだと思うけど、
それでもかなり限界ぎりぎりな予感。
0833root ★
垢版 |
04/06/27 15:03ID:???
今の段階ではディスクI/Oで負けるので、
MaxClientsを256から128にして、口をしぼってみた。
これだとつながりは悪くなる気がするけど、つながったあとの反応は多少いいかなと。
0835 ◆BFzK/mtqM2
垢版 |
04/06/27 15:29ID:4FgGVs00
ミラーにもZend+PHPaccelerater入れてみた
0836見習い▲ ★
垢版 |
04/06/27 15:41ID:???
なにもしないことを希望

0837見習い▲ ★
垢版 |
04/06/27 15:44ID:???
設定を元に戻して欲しい

機器が全部そろってからの素の状態を観察して
何をするかを考えて pla , do , see じゃなきゃ意味ないですよ

全部そろってから考えて行きましょうよ

元に戻すことを希望。
0838 ◆BFzK/mtqM2
垢版 |
04/06/27 15:45ID:4FgGVs00
>root★さん

昨日は4000cp5mで頭打ち状態でしたが、Zend+PHPaccelerater投入で
4000cp5m突破しても安定してますね。

アクセスカウントを見る限り、Zend+PHPacceleraterの限界は8000cp5mあたりですかね。
0839見習い▲ ★
垢版 |
04/06/27 15:46ID:???
とくに
>今の段階ではディスクI/Oで負けるので、

この理由で各種パラメータを触ることは
目的地に達するとこができるとは思えない。
やってはいけないことだと思います。

お願いですから、機器がそろうまで待っててください。
0840動け動けウゴウゴ2ちゃんねる
垢版 |
04/06/27 17:25ID:EHA7MJr5
>>839
でも、いまのうちに最適化すれば機器がそろった時に効果が高くならないかな?
機器がそろった時点でやると原因が判らなくなる可能性もあるし
0841外野ァァン
垢版 |
04/06/27 17:47ID:cq8NRthW
素に戻すのは全部そろってからにして今単品でできる実験は今のうちにいろいろやっておけば
後々役にたつかもしれないねという考え方も
0842動け動けウゴウゴ2ちゃんねる
垢版 |
04/06/27 17:53ID:O/3urGY6
最適化したうえで機器入れると何が効果あったのかわからなくなるから
まず元に戻してからbefore afterが知りたいんじゃないのな。
ソフト屋はソフト面からの変化を見ているし、ハード屋はハード面からの変化が見たいって事だと思うね。
0843動け動けウゴウゴ2ちゃんねる
垢版 |
04/06/27 18:00ID:Dmlsw6gB
現システムでの成功体験が足かせとなって、新システムでの
チューニングに先入観が入ってしまい、実験の「幅」が狭くなって
しまうことも考えられるからなぁ。特に複数のパラメータをイジって
バランス取るような作業をする際には。

root★さんとしては「其処に負荷の高いマシンとユーザが居るから」少し
でも改善したいと努力されてるんだと思うし、その気持ちも分かるんだけど。
0844i093119.ap.plala.or.jp
垢版 |
04/06/27 18:15ID:oIQI4G/W
言いたいこともわかるけど、このデータも実験データとして
残るわけだから。
全部来たときに全て戻して、そこからもっかいpla, do, see
すればいいんでないかい?
0846root ★
垢版 |
04/06/27 18:55ID:???
帰宅しました。

>>838
統計見ていてもそのぐらいみたいですね。
bananaサーバでバックエンドなしでここまでいくとは考えてなかったので、
望外の収穫だったのかなと。

>>836 >>837
その場その場での「最善の解」を探していくスタイルも、ありかなとは思います。

しかしたしかに、言われることはごもっともです。
前向きでない努力をしても、結局意味がないし、本質を見失ってしまうかもしれない。

仰るとおり今は一時的な状態であって、全部そろってから本格的に
watch, plan, do (tune), checkということになるわけで、
バックエンドサーバが出来上がるまでフロントエンド側の設定は当面「凍結」と
いうことにします。

つまり、それまでは何も変更しない。

バックエンドサーバが来たところで再度「あがき」を再開してみようかと。
0847root ★
垢版 |
04/06/27 19:01ID:???
というわけで、激しく重くなったりつながりにくくなったりしても、
仕様だと思って、当面許してちょ。(特にDoCoMoな人)
0848root ★
垢版 |
04/06/27 19:05ID:???
で、アクセス数の統計見ていて思うのですが、
携帯って、なんだかアクセス数がフラットですね。

トップページへのアクセスは昼休みに急増しているわけですが
(i.2ch.netとかは、昼休みにぽっこり山が出来る)、
全部足してみると(つまりc-xx)、比較的平らな気がします。

そういうものなのかな?
0849 ◆BFzK/mtqM2
垢版 |
04/06/27 19:22ID:4FgGVs00
>>848 root★さん

ミラーの時間別アクセス数は、
0時(35000Hits)をピークに5時(12000Hits)にかけて一気に1/3になり、
その後、11時(19000Hits)までに徐々に上がって行き、
12時代に25000Hitsに跳ね上がり、その後は17時まで20000Hitsで横ばい、
18時(24500Hits)以降また徐々に上がっていくような感じです。

0851見習い▲ ★
垢版 |
04/06/27 20:10ID:???
>>848
そういうものっすねー
なぜかと言うといろいろ推測できるけど、、、
携帯系のサーバは私の経験上いつもフラットです

http://server.maido3.com/pie/
404 , 405 , 406 追加しましたー
0853見習い▲ ★
垢版 |
04/06/27 20:39ID:???
あちゃっ -1 づつしてください
0855root ★
垢版 |
04/06/27 20:58ID:???
>>851
私も気づいてましたが、out(緑)よりin(青線)の方が多いですね。
システムの都合上そうなると。(datキャッシュが効いている)
0856 ◆WMaLhm.gkw
垢版 |
04/06/27 21:02ID:mJTq0t0h
c-docomoとc-auのLAは大違いなのに、転送量は大差ないのかー
0857root ★
垢版 |
04/06/27 21:05ID:???
>>856
アクセス数もLAほど大きくは違わないので、
まさに捌け具合の違いのようです。< c-docomoとc-au
0858 ◆BFzK/mtqM2
垢版 |
04/06/27 21:06ID:4FgGVs00
バックエンドが来た時は、delayを縮めることも可能なのかな?
0859 ◆BFzK/mtqM2
垢版 |
04/06/27 21:08ID:4FgGVs00
>>857
一時的に、FOMAとMOVAを分けて様子を見たい気持ちがありますね。
0860root ★
垢版 |
04/06/27 21:09ID:???
>>858
様子を見ながらかなと。
個人的には60secあたりが落としどころかなと考えていたりします。

FOMAだけc-othersに振ってみるかい?
0861root ★
垢版 |
04/06/27 21:10ID:???
でも、見習いさんに「来るまで待たんかい、今やるなゴルァ」って言われそうだから、
やめときます。
0862見習い▲ ★
垢版 |
04/06/27 21:10ID:???
>>860
いや それは・・・

今度説明します、
0864root ★
垢版 |
04/06/27 21:12ID:???
>>862
了解です。< 説明

ディレイ値がどのくらい2ちゃんねる全体の負荷に影響するのかっていうことは、
ちょっと気になってますが。

# しばらく(数時間ほど)オフライン。
0865root ★
垢版 |
04/06/28 01:33ID:???
この時間(ピーク)

c-au: おなかいっぱいだけど、なんとかそれなりにレスポンスはある
c-docomo: もうおなかいっぱい。スレ(dat)を表示するところでぐぐっと詰まって、ほとんどだめぽ
c-others: 余裕

昨日よりは少しはいいけど(アクセラレータ呪文の効果)、当面はこんなところで。
0866動け動けウゴウゴ2ちゃんねる
垢版 |
04/06/28 10:49ID:A+OEScSI
c-othersからのスレッド直リンクは本来のキャリアでないところから読めます
これは放置でいいんですかね?データ取得的には問題にならないのかな?
一応報告だけしておきます。
0867root ★
垢版 |
04/06/28 11:17ID:???
>>866
c-othersは今のところ制限入れてません。
制限自体は簡単なので、
バックエンドサーバが来て動き出したら、DoCoMoとauは制限しようかなと。

もちろん今制限入れてもいいけど、まだ中途の状態だし。
■ このスレッドは過去ログ倉庫に格納されています

ニューススポーツなんでも実況