2ch特化型サーバ・ロケーション構築作戦 Part51

**動け動けウゴウゴ２ちゃんねる** · 2010/06/25(金) 21:31:20

2ch特化型サーバ・ロケーション構築作戦のスレッドです。

・２ちゃんねるのサーバロケーション、PIEに関する関連作業・調整事項
・DNS登録・変更関連の各種作業や調整事項
・２ちゃんねるのサーバで採用しているOS、FreeBSDに関する情報・調整事項
・各種作戦・プロジェクトとの連携、プロジェクト間の連携

等を取り扱います。

前スレ:2ch特化型サーバ・ロケーション構築作戦 Part50
http://qb5.2ch.net/test/read.cgi/operate/1277404142/

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:05:29

>>899
へー、1年か。
個人的にゲハは別にどうでもいいんだけど、ゲハ脳の奴らが他の板を占拠するんじゃない？

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:09:18

FOXは男でゲハは女ってことだ
どっちも咎人

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:15:30

httpdの初期設定数が多いと、全部埋まっていくのに時間がかかって、
鯖の再起動もそんな俊敏にできなくなる　ってrootさんが言っていたから、
httpdの数が増えていくのは間違いなく負荷、
負荷と言えないにしても対応力に限界があるものだと認識していたけど
>>874かぁー

**動く動くウゴウゴ２ちゃんねる** · NG

９０３をふんだので次スレを立ててもイイという解釈でヨロシイでしょうか（笑）

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:19:05

スレ立てもsaborinになると重複スレが乱立しそうだ

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:21:34

>>903
駄目

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:21:59

田村さんもあいかわらず出演してるのか

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:22:27

>>903
950超えて立ってなかったらお願いしますわ

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:22:49

ドイツ3点目

◆TIGOI/DrzHH9 · 2010/06/28(月) 00:23:09

カウンターどーん

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:23:24

また詰まった

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:23:39

得点されると重くなる

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:23:41

ちょぅさっきっから落ちすぎなんだけどしょうないのかなこれは・・

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:23:55

2010/06/28(月)　00:23:45
NHK総合の勢い: 13res/分　00:15～00:45　東京カワイイＴＶ
NHK教育の勢い: 6res/分　00:15～00:40　美の壺[再]
日本テレビの勢い: 22res/分　23:55～00:50　Ｇｏｉｎｇ！Ｓｐｏｒｔｓ＆Ｎｅｗｓ
TBSテレビの勢い: 1067res/分　22:00～01:10　２０１０ＦＩＦＡワールドカップ・決勝トーナメント「ドイツ×イングランド」
フジテレビの勢い: 58res/分　23:50～01:30　Ｆ１世界選手権第９戦ヨーロッパグランプリ
テレビ朝日の勢い: 18res/分　23:55～00:30　やべっちＦＣ
テレビ東京の勢い: 22res/分　00:00～00:30　ＳＨＯＷＢＩＺ　ＣＯＵＮＴＤＯＷＮ

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:23:57

なんか酷くね？

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:24:26

やっぱり落ちない

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:24:26

処理待ちになっちゃうのは仕方ないのかなあ

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:24:36

日本戦以外でこの状況はちょっといただけない。

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:26:01

4点目・・・

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:26:06

またどーん

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:27:39

つまるだけですぐ回復するんだよね

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:27:48

鯖的には落ちてないんだろうけど書き込みしてる人間には一番いいとこで
お預けを喰らう犬みたいな感じでストレスが溜まるのである

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:28:02

2010/06/28(月)　00:27:24
NHK総合の勢い: 21res/分　00:15～00:45　東京カワイイＴＶ
NHK教育の勢い: 5res/分　00:15～00:40　美の壺[再]
日本テレビの勢い: 10res/分　23:55～00:50　Ｇｏｉｎｇ！Ｓｐｏｒｔｓ＆Ｎｅｗｓ
TBSテレビの勢い: 870res/分　22:00～01:10　２０１０ＦＩＦＡワールドカップ・決勝トーナメント「ドイツ×イングランド」
フジテレビの勢い: 117res/分　23:50～01:30　Ｆ１世界選手権第９戦ヨーロッパグランプリ
テレビ朝日の勢い: 26res/分　00:30～02:25　Ｇｅｔ－Ｓｐｏｒｔｓ[N]
テレビ東京の勢い: 15res/分　00:30～00:35　[N]ＴＸＮニュース

地味にF1があるのね

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:29:01

なんか日本戦の時より全体的に弱い気が

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:30:37

次の日本戦が不安だね

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:31:40

80M弱ってところか

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:34:12

次の日本戦と時間帯が一緒だから
同じような感じだと確かに辛いかも。
>>876の導入でどれだけの効果が出るか
期待したいところですね。

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:36:30

>>923
オランダ戦の時はもっとLAが低かったと思う。しかも2800res/minくらい行ってた
今は2300res/minくらいでLAが100を超えてしまう

次のチューニングでいい結果が出るといいが

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:37:01

>>927
オランダの後どこ変えたんだっけ

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:37:40

>>913
>>922
期待の高性能鯖でもこれぐらいで処理が詰まるんだなぁ
落ちないけど詰まる鯖・・・>>926と同じく期待するしかないか。

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:38:06

server statusのログを一定間隔でどこかに吐き出す…
にしても結構なサイズになっちゃうよねhttpdの数が多すぎて。

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:40:14

書き込みとディスクI/Oを完全に非同期にする仕組みを考えないと駄目かもね。

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:42:25

どーん対策でhttpdの起動数を増やした結果、詰まりが比較的早く発生することになったという感じかな

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:42:34

>>927
2800res/minも行ってたか？

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:44:15

さっきのドイツ戦勝ち越し決めた時勢い33万でてたよ、日本戦より負担掛かったかも

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:45:40

現在のセッティングは「喉もと過ぎれば熱さを忘れてしまう」ようですね
せっかく用意したプロセスもどーんの2波3波目には生かされていない。
apacheのプロセスを常に最大値で待機させるとかMaxRequestsPerChildを50000位にするとか
mod_speedycgiのSpeedyMaxRuns値を5000位にしてみるとか(過去ログ見るに今現在はデフォルトな500ですね)
1度目のどーんはCPUパワーでクリアしても、その後がハード&ソフトを生かしてない。
まだ試してみることあるようだが中の人がんばれー

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:46:29

>>928
368 名前： root▲▲ ★ 投稿日： 2010/06/20(日) 23:43:06 ID:???0
明日の設定変更お願い @ hayabusa は、
これでいこうかと。

(現状)
最初にhttpdを1024個起動し、アイドル状態のhttpdが常に704(703+1)個以上に
なるように起動数を変化させ、非常時には待機数を2048個まで増やす設定

StartServers 1024
MinSpareServers 703
MaxSpareServers 1024
ServerLimit 2048
MaxClients 2048
MaxRequestsPerChild 10000
MaxMemFree 2000

↓

(変更後)
最初にhttpdを1536個起動し、アイドル状態のhttpdが常に1024(1023+1)個以上に
なるように起動数を変化させ、非常時には待機数を8192個まで増やす設定

StartServers 1536
MinSpareServers 1023
MaxSpareServers 1536
ServerLimit 8192
MaxClients 8192
MaxRequestsPerChild 10000
MaxMemFree 2000

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:46:49

>>903
おｋ

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:47:02

>>928
過去ログ見たところ>>932のようだった

>>933
hayabusa全体だとそこまで行ってた
地上波と同時にサッカーchでも実況していたから

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:48:34

さあ揺り返し

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:49:51

>>936
よくわからんけどそのStartServersってのを最初から8196にしちゃいかんのだろうか
来ることがわかってる大型イベントとかの対応にはよくても平常運転には無駄が多いってことかな

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:52:59

>>940
384 名前： root▲▲ ★ 投稿日： 2010/06/21(月) 00:03:25 ID:???0
>>368 の心は、

・いつでも相手可能な(アイドルな)httpdを常に1024以上用意しておけば、
とりあえず急に来ても事足りるだろう

・平常時はhttpdの数が足りているなら、必要以上にhttpdを増やすよりも、
メモリは他の用途(バッファキャッシュ等)に使えるようにしておこう

・でも、実況サーバには常識外れな量のリロード要求が押し寄せることがあるから
(例: 昨日の試合終了時)、httpdの実行可能数のマージンはとても大きくとっておこう

といったかんじです。

って、当時のrootさんは書かれてますね。

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:54:56

>>940
挙動としてはむしろ、httpdの起動数があんまり増えると、どーんに弱くなってる印象
元の設定だと、極度などーんが来ると詰まって4分ぐらい応答不能になってたから
httpdを増やせばいいって話ではないみたいね

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 00:55:19

なんでyutori7のE9元に戻ってるんだ、、、謎だ；

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 01:03:00

http://qb5.2ch.net/test/read.cgi/operate/1277404142/44
＞-t660
半端な。30分アニメが終了するまで生かしておこーyo
SpeedyTimeOut 1800

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 01:04:51

>>932
書き込みを一気に受け付けてしまうってことですかな。

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 01:08:07

>>944
IDの種とかあと多分規制リストもその時間保持し続けるだろうから30分は長すぎる

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 01:11:36

>>941
そのバッファキャッシュってちゃんと仕事してるのかよくわかんないんですよね
>>864でも
>989M Cache, 214M Buf, 4970M Free
キャッシュとバッファで1200MBくらいしか使ってないから5000MB近く余ってますし
スポーツ実況には効きにくくてもAA連投とかバルスには強いんでしょうか

>>942
どーんに弱いのはマージンを取ってるから追加のhttpdの呼び出しに時間がかかってるんだと思ってました
追加人員の手配で電話かけて呼び出しかける係の分だけ現場が手薄になるみたいな
実際にはhttpdの先の処理に手間があるんですかね医者を増やしても病院の支払窓口で2時間待ちみたいに

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 01:16:15

>>947
httpdが増えてからも、前ほどどーんに強くないというか
瞬間最高値がさほど行ってくれないので、
窓口は沢山あるけどその後ろがー　という印象

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 01:32:12

当初こんな感じだったような・・・。

282 名前：root▲▲ ★[] 投稿日：2010/06/17(木) 21:03:26 ID:???0
2xx 3xx 4xx 5xx URL
2958 28 0 0*/livenhk/dat/1276775583.dat
1046 4 0 0 /livefoot/dat/1276775869.dat
1007 0 0 0 /livenhk/subject.txt
692 0 0 0 /test/bbs.cgi
478 2 0 0 /livecx/dat/1276759684.dat
394 18 0 0 /livecx/dat/1276772540.dat
324 0 0 0 /livenhk/
301 0 0 0 /test/read.cgi/livenhk/1276775583/l50
268 0 0 0 /livefoot/dat/1276772479.dat
244 0 0 0 /livefoot/subject.txt
230 3 0 0 /livejupiter/dat/1276772310.dat

はじめてLA2点台を見ました。
もうさがりはじめています。

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 01:33:31

SSDの劣化というか、ウェアレベリングが云々でどうこうみたいなの無いのかな

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 01:51:10

Trimコマンド送ってるかとか？

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 01:52:17

>>948
もしSSDへの書き込みでつまづいてるなら複数の書き込みをまとめて遅延書き込みするか
複数のSSDを導入して振り分け器みたいなのを通して分散書き込みさせるかぐらいですか
RAID0を組んじゃうとストライピングする処理のせいで余計に時間がかかりそうですね

>>950
SSDをミラーリング組んで1日1回片方止めてSSD用デフラグかけて
繋ぎ直して差分取得ってのを1日ごとに交互にやるのはあまりスマートじゃないですよね

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 02:03:29

あ、ミラーリングするんじゃデフラグでTrimコマンドの代わりさせる意味が無いですね
書き込み専用とバックアップ専用のSSDを分けられるなら意味があるかもしれませんけど

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 02:08:26

X25-MからX25-Eにしてしまえばいいじゃない

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 02:24:26

X25-Mは書き込みがそんなに得意じゃないし、書き込みで重くなるのはディスクがネックの可能性もあるのかな
NCQも動いてないし

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 02:43:26

お礼言うの忘れてました
素人の疑問に答えてもらってありがとうございました
普段いろんなサーバーを使わせてもらってる1ユーザーとしては
こういうどうしてこうなってるっていう説明がとても頼もしいです
ハード屋さん・サーバー屋さん・ソフト屋さん・回線屋さんいつもありがとうございます

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 02:44:59

>>801
何回も注意されていると思うけど、そういうの相手にするときは
自分の巣に持ち帰ってくれよー

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 03:03:48

仮にSSDの性能不足が問題ならまずはNCQをどうにかして有効化しないとね。
>>952
*高級な*RAIDカード使わないとIOPSが単機より落ちてSSDの意味が無くなるという罠が…

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 03:24:57

Z・F・S！Z・F・S！

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 03:27:57

SSDにデフラグなんて意味あったっけ？

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 03:36:00

論理断片もあんまり多いと遅くならね?

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 03:36:20

いや寧ろ壊れる原因

◆ZFS/AAXyGY · 2010/06/28(月) 05:35:41

|・∀・)ノﾖﾝﾀﾞｰ

**動く動くウゴウゴ２ちゃんねる** · NG

それでは
>>903のお約束のとおりに次スレを用意致しま～す（笑）

**動く動くウゴウゴ２ちゃんねる** · NG

>>964　done ♪

2ch特化型サーバ・ロケーション構築作戦 Part52
http://qb5.2ch.net/test/read.cgi/operate/1277651499/

悪～しか～らず～です～みま～せん～（笑）

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 06:35:23

6/28 (月)
23:00 オランダ vs スロバキアＮＨＫ総合
27:30 ブラジル vs チリＮＨＫ総合

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 08:25:32

>>864 だと、5000もhttpdが立ち上がってるのに、
メモリが大量に余ってるのが気になるな

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 11:10:22

INTEL製MLC型SSDの特徴は、読み出しが早くて書き込みが鈍い
その特徴がモロに出てるようにも見える

大量書き込み【シーケンシャルライト】で落ちずに待ちを食らう
大量書き込み終了後の復帰に当たる読み出し【シーケンシャルリード】は早い
断続的な書き込み【ランダムライト】は、HDDに比べてかなり早いので詰まりは感じない
むろんその逆である【ランダムリード】も問題は出ない

まぁ、1行レスを大量に受けたとしても、書き込み待ちするほどの転送量(公称80M超え)
とは思えないから、たんなる気のせいだろうけどね

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 11:27:01

大量にhttpdをforkしようとしてあっぷあっぷしてるような気もしないでもない
httpdを軽くしたらもっとサクっと動いてくれるかもしれない

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 11:42:47

マルチスレッド化してspeedyともさようなら

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 11:47:49

nginxだよnginx

いやこの際UNIX板の総力を結集してosolに完全独自のbbshttpdを書いてもらって
それを本番と予備とで二重化して運用系とかメニュー鯖と合わせて全てを3台で賄えば

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 12:24:16

workerなapacheを立ち上げて、httpなリクエストのうち、bbs.cgiを呼び出すものだけ
SunOSさん謹製のbbsdになげるというのを却下された記憶がある。

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 12:28:04

>>971

妄想はそこまで、他力本願すぎる
調整レベルならまだしもフルスクラッチは大変すぎるだろ

それに大体誰がメンテしてくれるんだそれ、httpdとか
システムの根幹に関わる部分だからメンテがある程度保障されていないと
使うわけにもいかんだろう

それなら現状はサーバー分けて使ったほうが費用的にかからんとおもうぞ
世の中人件費が最も高いからな

◆amidaMovTg · 2010/06/28(月) 12:37:26

httpdを新しく作るよりはSpeedyCGIをworkerに対応させたものを作ってもらった方が良いような気がした。

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 12:37:50

SSDがげいいんの可能性もあるのかなぁ、、、

ところでなんでyutori7のE9って99～98を行ったり来たりしてんの？
つか一旦下がったのがなんで上がるのかよくわからん、そういうもんなの頭？
http://trickbox.70.kg/smart/yutori7_smart.txt
http://trickbox.70.kg/smart/yutori7_smart_E9.png

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 12:38:50

まぁ上のは妄想だけどさ
SpeedyCGIってのは外した方がいいんじゃね? それのせいで1クライアントに1プロセスを
割り当てざるを得なくなってんだったら、その加速効果とどっちがメリット大きいか微妙じゃね
FastCGIとかいう代替物あるんじゃなかった?

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 13:17:32

プロセス空間に現行スレ全部のっけて複数のスレッドからポインタでアクセス
富豪的でたまらん

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 13:27:59

1GBくらいのRAMディスクがあれば現行スレ全部乗っけられそうな気がしない？ｗ

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 14:13:07

1GiBだと少々足りんかもな

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 14:49:26

>>900
散々ｶﾞｲｼｭﾂだが困ってるなら荒らしとして通報すれば良い。
通報されない限りは特に誰も困っていないと見なされるのが2chの常識。

ちゃんと規制議論板見てフォーマットに従って通報するほどの労力と言うのが
本当に困ってるかどうかの一つの指標。

>>957
今回はお試し●の脆弱性の話だから仕方無いだろ。
（使用可能なお試し●が簡単に増やせる）

>>972
別に却下はされていない。
今後の課題だねえって事で後回しにされただけ。

そういうのは根本的な改修につながるから、W杯後に各種データを見比べて
ﾜｲｶﾞﾔで計画立ててやるレベルの話だから。

**む＠出先** · 2010/06/28(月) 14:51:18

stockサーバで、例のwrapperの動作確認実験します。
挙動不審になることがあるかも。

**む＠出先** · 2010/06/28(月) 14:56:16

動いてはいそうだ。

もう少ししたら、掲示板サーバでも試してみる予定。

**む＠出先** · 2010/06/28(月) 15:02:48

悪くなさそうなので、anchorageでテストします。

一度changi設定をほどかないといけないので、
リブートを入れてから作業する必要があります。

15:30ぐらいから作業はじめます。
作業時間、30分ぐらいかかる予定です。
その間anchorageサーバはダウンします。

すみませんがよろしくおながいします。

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 15:04:20

マジか今のうちに書いとこ

**む＠出先** · 2010/06/28(月) 15:06:45

本人証明しなきゃいかんのか。
携帯からトリップで書くです。ちとまっててと。

**ちきちーた ★** · 2010/06/28(月) 15:08:24

偽者くさい

なんちゃって

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 15:11:17

　　 _, ,_ 　ﾊﾟｰﾝ
　（　‘д‘）
　　⊂彡☆))Д´）>>986

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 15:12:36

>>888
スーリヤの杖作るのにフラスコ15個トレードが必要なんで
それで各地わきまくりだよ

◆MUMUMUhnYI · 2010/06/28(月) 15:14:17

>>985
むぎゅ。

>>986
本物さんだ。

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 15:15:00

アニメスレで読み込めずエラーになるスレッドがあるんですがどういうことでしょうか
ＵＲＬを見たら，kamomeとかいうのに変わっているんですがこれの影響ですか？
ちょっと前まではlive28とかいうのだったように思うんですが

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 15:21:17

wrapperって>>739かあ
wktk

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 15:22:41

>>986
ｷﾀ━━━━（｡Ａ｡）━（ﾟ∀ﾟ）━（｡Ａ｡）━（ﾟ∀ﾟ）━（｡Ａ｡）━━━━!!!!

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 15:23:02

2ch特化型サーバ・ロケーション構築作戦 Part52
http://qb5.2ch.net/test/read.cgi/operate/1277651499/

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 15:24:23

>>990
専ブラ使用ならその手の質問は各専ブラにまず問うのが筋。

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 15:25:05

狐ちょっとは向こうに顔出してよ

**ちきちーた ★** · 2010/06/28(月) 15:26:40

今日は暑いので、
なんで34℃もあるんだ札幌沖縄より暑い

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 15:27:28

北海道は湿気が少なくて不快指数は低いイメージが
関東はｼﾞﾒｼﾞﾒｼﾞﾒｼﾞﾒ……

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 15:28:01

暑いとビールがうまいよね！黒ラベルとかｗ

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 15:28:22

love7とscience7と（以下略
ください

**動け動けウゴウゴ２ちゃんねる** · 2010/06/28(月) 15:28:55

札幌は南国だからな
下北半島なんて北国だから22～3度程度だ