X

2ch特化型サーバ・ロケーション構築作戦 Part58

■ このスレッドは過去ログ倉庫に格納されています
NGNG
2ch特化型サーバ・ロケーション構築作戦のスレッドです。

・２ちゃんねるのサーバロケーション、PIEに関する関連作業・調整事項
・DNS登録・変更関連の各種作業や調整事項
・２ちゃんねるのサーバで採用しているOS、FreeBSDに関する情報・調整事項
・各種作戦・プロジェクトとの連携、プロジェクト間の連携

等を取り扱います。

前スレ:2ch特化型サーバ・ロケーション構築作戦 Part57
http://qb5.2ch.net/test/read.cgi/operate/1280669783/
2010/08/09(月) 18:03:23ID:Ops/i7HK0
我慢できる重たさ
http://c-test.2ch.net/test/-/operate/1281086504/w
Mozilla/5.0 (Linux; U; Android 1.6; ja-jp; SonyEricssonSO-01B Build/R1EA025) AppleWebKit/528.5+ (KHTML, like Gecko) Version/3.1.2 Mobile Safari/525.20.1
462256
垢版 |
2010/08/09(月) 18:07:36ID:ZSBmI7+h0
>>457
2 running なんて、確かに I/O 待ちばっかりって感じなんでしょうね。
r.so 自体の処理時間なんてゴミのようなものだと。

>>460
bgならばハイブリッドにするよりも、SSDの値段分RAMを積んで、/mdを…とか。
463む＠出先
垢版 |
2010/08/09(月) 18:11:43ID:NCWBWChA0
bg21ちょっと見てみた。

ar0 (HDD) が I/O 100% 近いですね。

＞イケメンおにいさんへ

iostat -x -w 1 ar0　とすると、状況が刻一刻わかるです。

%iostat -x -w 1 ar0
extended device statistics
device r/s w/s kr/s kw/s wait svc_t %b
ar0 5.4 56.3 63.0 1072.9 38 129.0 8
extended device statistics
device r/s w/s kr/s kw/s wait svc_t %b
ar0 50.3 198.1 664.3 3695.8 2 108.8 90
extended device statistics
device r/s w/s kr/s kw/s wait svc_t %b
ar0 64.6 337.7 611.8 6153.4 58 53.1 84
extended device statistics
device r/s w/s kr/s kw/s wait svc_t %b
ar0 92.3 163.7 1107.4 3205.3 1 47.2 76
extended device statistics
device r/s w/s kr/s kw/s wait svc_t %b
ar0 49.1 281.9 453.8 5575.5 26 113.2 99
extended device statistics
device r/s w/s kr/s kw/s wait svc_t %b
ar0 88.8 195.4 935.4 3426.0 1 63.9 86
464む＠出先
垢版 |
2010/08/09(月) 18:13:30ID:NCWBWChA0
総合的にシステムの様子みるには、

systat -v

でいけるかと。
465ちきちーた ★
垢版 |
2010/08/09(月) 18:13:57ID:???0
いろいろ次の手は考えられるけど、

まずBGをハイブリッドBananaに置き換えて　11台->2台を完成させポイントゲット
そしていよいよ　>>153の2を・・・　2台 ->1台でさらにポイントゲットして当初の目論見を達成
へ進もうと考えています。
466む＠出先
垢版 |
2010/08/09(月) 18:14:32ID:NCWBWChA0
iostat の出力の一番最後の %b が、HDD のビジー率です。

で、HDDがビジーということで、
これを md や SSD にすれば以下略と。
467ちきちーた ★
垢版 |
2010/08/09(月) 18:15:49ID:???0
>>463
もうちょっとしたらハイブリッドBananaが届く予定です
bg30の予定。

あと、一時間か二時間か三時間か・・・
468256
垢版 |
2010/08/09(月) 18:18:11ID:ZSBmI7+h0
>>465
ふむふむ、まずは標準品でという話を思い出しました。
469む＠出先
垢版 |
2010/08/09(月) 18:18:33ID:NCWBWChA0
この用途だと noatime を /hd /home あたりにいれてもらうと、
いざという時ののびがぜんぜん違ってくると思いますです。>>467
470ちきちーた ★
垢版 |
2010/08/09(月) 18:21:04ID:???0
>>469
はーい
投入後、様子をみつつ・・・
471ちきちーた ★
垢版 |
2010/08/09(月) 18:24:03ID:???0
bg21 30Mbps

last pid: 99856; load averages: 12.46, 19.10, 18.52 up 67+04:34:04 02:23:11
568 processes: 1 running, 567 sleeping
CPU states: 27.3% user, 0.0% nice, 37.3% system, 6.4% interrupt, 29.0% idle
Mem: 924M Active, 6109M Inact, 360M Wired, 277M Cache, 214M Buf, 11M Free
Swap: 8192M Total, 44K Used, 8192M Free

この辺が現bgサーバの限界のようですなぁ。
472ちきちーた ★
垢版 |
2010/08/09(月) 18:24:28ID:???0
99142 ch2bg21 1 4 0 64896K 6772K kqread 1 0:05 0.15% httpd
99360 ch2bg21 1 4 0 64832K 6972K kqread 1 0:05 0.15% httpd
99032 ch2bg21 1 96 0 64768K 6796K select 1 0:05 0.10% httpd
99029 ch2bg21 1 4 0 64832K 6692K kqread 0 0:05 0.10% httpd
99708 ch2bg21 1 4 0 65144K 7148K kqread 0 0:02 0.10% httpd
99867 ch2bg21 1 4 0 64880K 6512K kqread 0 0:00 0.07% httpd
99865 ch2bg21 1 4 0 64880K 6516K kqread 0 0:00 0.07% httpd
99861 ch2bg21 1 4 0 65144K 6860K kqread 1 0:00 0.06% httpd
99045 ch2bg21 1 96 0 63708K 6760K RUN 0 0:05 0.05% httpd
99020 ch2bg21 1 4 0 65144K 7144K kqread 0 0:05 0.05% httpd
99237 ch2bg21 1 4 0 64880K 6788K kqread 1 0:05 0.05% httpd
99227 ch2bg21 1 4 0 64752K 6860K kqread 1 0:05 0.05% httpd
99160 ch2bg21 1 4 0 64768K 6920K kqread 0 0:05 0.05% httpd
2010/08/09(月) 18:27:27ID:DfoZt25h0
相当重いな
2時間持つか
2010/08/09(月) 18:55:05ID:y5g1uwAG0
効率の悪いロジックを誰かさんが書いてるから
2010/08/09(月) 18:56:35ID:+sy9Nr/y0
ロジックとは言わんなぁ
2010/08/09(月) 18:58:35ID:???P
呼ばれた気がする
2010/08/09(月) 19:03:16ID:7s6zLZN/P?PLT(44501)
>>473
>あと最大でも200ﾚｽしか返さないなんて制限も必要かも｡
それは間違った範囲を指定した場合の制限ですか？
それとも200レス以上欲しい人に対しても制限かけるのですか？
後者ならやらないほうがいいと思います。
欲しい人は制限があっても、その分接続するだけだし、TCPコネクションの数が増えるだけではないでしょうか。
2010/08/09(月) 19:05:08ID:7s6zLZN/P?PLT(44501)
あれっ？アンカーが変。
上は>>413あてです。
479ちきちーた ★
垢版 |
2010/08/09(月) 19:09:35ID:???0
きた、　bg30.2ch.net ハイブリッドbanana
banana3802

うけとって
BG仕込んでくる
2010/08/09(月) 19:10:04ID:Z+2aSW5d0
banana3802.maido3.com(bg30.2ch.net)の転送量グラフはこちらになります。
http://traffic.maido3.com/fRDk/TNZI/OuoJ/
2010/08/09(月) 19:11:56ID:DfoZt25h0
楽しみ
2010/08/09(月) 19:14:08ID:???P
>>413
開始レスが存在しない場合、空か>>1のみが嬉しいです。
2010/08/09(月) 19:17:48ID:g7Vu6B8R0
重すぎて転送量減ってるのかな？
2010/08/09(月) 19:23:06ID:7s6zLZN/P?PLT(44501)
>>418
なるほど

>>437
専ブラでそう言う仕様のものがります(リロード制限回避)
その影響じゃないですかね
2010/08/09(月) 19:24:34ID:7s6zLZN/P?PLT(44501)
あっbg23ーbg24なら関係ないや
486ちきちーた ★
垢版 |
2010/08/09(月) 19:42:56ID:???0
てこずってます、
まだまだかかりそう　< bg30
2010/08/09(月) 20:06:01ID:1gFX0uZ+0
>>486
慌てて失敗すると結果的に時間がかかることになるんだろうから
ゆっくりでいいので確実に作業してくれ
2010/08/09(月) 20:06:06ID:???P
あまりに重いので、各BGに振り分けてもいいですか？
2010/08/09(月) 20:09:15ID:???P
って、test2入ってないのか。。。。orz
2010/08/09(月) 20:12:17ID:???P
古いPHPに戻せばいいのか。データは取れたのかなぁ。
2010/08/09(月) 20:20:17ID:???P
だめだ、ちょっと、戻してきます。独断ですが、やばい。
2010/08/09(月) 20:36:44ID:???P
同じかぁ、HDDがｷﾘｷﾘ言うのと、回線が溢れるのとどっちがやばいんだろう？
2010/08/09(月) 20:37:56ID:n199JJL70?PLT(23457)
何がどうやばいのかな？
それを書かなきゃ♪

おいらはbg20に入れたっけ。。。
2010/08/09(月) 20:39:05ID:BgQnWv4C0
HDD苛めすぎたらシステムごと落ちるんじゃないかなぁ
2010/08/09(月) 20:40:48ID:n199JJL70?PLT(23457)
入れなかった（照）

>>492
どっちもどっちじゃないかなぁ。
今はあんまし気にしなくていいと思うよん♪
2010/08/09(月) 20:42:05ID:+bVUWBSW0
金曜日の状態にしたのか
2010/08/09(月) 20:42:21ID:???P
http://sv2ch.baila6.jp/graph_live.cgi?!bg21.2ch.net
このグラフ見て、壊れそうだと思いました。
>>471 にも限界と書かれていますし。
2010/08/09(月) 20:46:39ID:???P
>>495
じゃあ、やっぱりbg21一本体制にしておきますか。。。
どっちもどっちなら
499ちきちーた ★
垢版 |
2010/08/09(月) 20:49:11ID:???0
apache のバージョンが違うためか　(bg21とハイブリッドbanana)
apr_なんちゃらの socket関係のところでこけている。
たしかにbg21でコンパイル時にでなかったワーニングがハイブリッドbananaででる

read.c:225: warning: implicit declaration of function 'apr_socket_create_ex'
2010/08/09(月) 20:49:32ID:n199JJL70?PLT(23457)
>>497
あらーんどこかで見覚えのあるグラフ♪
限界といっても「壊れる」限界ぢゃくって、捌ききれる「限界」だから壊れるのとは別♪
気にしなくてもいいのだ♪

そいえば、uptimeの記録はしていないのよね。@bg2*
2010/08/09(月) 20:53:38ID:n199JJL70?PLT(23457)
ttp://qb5.2ch.net/operate/kako/1230/12307/1230725741.html#249
でも同じ現象が出ていたような♪
502 [´・ω・｀] 移動中 P219108008031.ppp.prin.ne.jp◆MUMUMUhnYI
垢版 |
2010/08/09(月) 20:55:51ID:SUiTAaZw0
dsoにあるread.cgのMakefile持ってきて
改造して使えばいけるはずと予想。
2010/08/09(月) 20:56:03ID:BgQnWv4C0
また中の人がインストールミスってるんじゃね？
2010/08/09(月) 20:57:06ID:yM+cK+0+P
>>499,501
今後はFreeBSD 8.xR＆Apache 2.2が標準になっていくだろうから、
いつだかのbg21みたいに旧仕様で作らず、新仕様にあわせて改良していくほうがいいかと
505ちきちーた ★
垢版 |
2010/08/09(月) 20:58:36ID:???0
ソース書き直した　>>504のように
これからデバッグだー
506ちきちーた ★
垢版 |
2010/08/09(月) 21:01:54ID:???0
まぁ　時間がかかるから
今日は撤退ですな、

DNS元にもどしますー
507ちきちーた ★
垢版 |
2010/08/09(月) 21:26:16ID:???0
できた気がする

http://bg30.2ch.net/test2/r.so/qb5.2ch.net/operate/1281086504/
http://bg30.2ch.net/test2/r.so/qb5.2ch.net/operate/1281086504/l10
http://bg30.2ch.net/test2/r.so/qb5.2ch.net/operate/1281086504/l10n
http://bg30.2ch.net/test2/r.so/qb5.2ch.net/operate/1281086504/287-289
http://bg30.2ch.net/test2/r.so/qb5.2ch.net/operate/1281086504/287-289n


どーだ
2010/08/09(月) 21:27:32ID:???P
c-test、bg30に振ってきまーす
2010/08/09(月) 21:28:29ID:???P
だん
510ちきちーた ★
垢版 |
2010/08/09(月) 21:29:40ID:???0
んじゃ　またDNSを、　c-testにふりますー
2010/08/09(月) 21:30:50ID:+bVUWBSW0
本番か
2010/08/09(月) 21:31:57ID:/JNP3ZWj0
本番きたー
2010/08/09(月) 21:32:27ID:hUhGoND50
(ﾉ∀`)ｱﾁｬｰ
2010/08/09(月) 21:32:28ID:PAVLzGjW0
c-test
http://traffic.maido3.com/i6Br/Rnt3/JYBP/1gbps/
bg30
http://traffic.maido3.com/fRDk/TNZI/OuoJ/
観察
2010/08/09(月) 21:32:31ID:ADCWltpwP
ﾄﾞｷﾄﾞｷ
2010/08/09(月) 21:32:34ID:BgQnWv4C0
擬似本番ぐらい？
517ちきちーた ★
垢版 |
2010/08/09(月) 21:34:07ID:???0
bg30

last pid: 4137; load averages: 0.21, 0.14, 0.06 up 0+01:29:51 05:33:50
1075 processes:1 running, 1074 sleeping
CPU: 1.8% user, 0.0% nice, 2.9% system, 0.0% interrupt, 95.3% idle
Mem: 907M Active, 954M Inact, 1186M Wired, 807M Buf, 4666M Free
Swap: 8192M Total, 8192M Free

518256
垢版 |
2010/08/09(月) 21:34:08ID:ZSBmI7+h0
もしかして、このまま2台達成！？
519ちきちーた ★
垢版 |
2010/08/09(月) 21:34:38ID:???0
>>518
そううまくいくかなぁ
願ってはいるけど、
2010/08/09(月) 21:41:40ID:+bVUWBSW0
来たね

c-test 53.263
bg30 47.379
521ちきちーた ★
垢版 |
2010/08/09(月) 21:43:32ID:???0
勘定があうなら　スレッド一覧も(p.so)BG30にして初めてbg1台が実現ですなぁ
522ちきちーた ★
垢版 |
2010/08/09(月) 21:43:45ID:???0
last pid: 4146; load averages: 1.50, 1.07, 0.58 up 0+01:39:37 05:43:36
1072 processes:1 running, 1071 sleeping
CPU: 9.2% user, 0.0% nice, 15.1% system, 0.2% interrupt, 75.5% idle
Mem: 1010M Active, 2657M Inact, 1275M Wired, 807M Buf, 2772M Free
Swap: 8192M Total, 8192M Free

2010/08/09(月) 21:45:20ID:???P
全部行っちゃいますかぁ＞p.so
524ちきちーた ★
垢版 |
2010/08/09(月) 21:47:58ID:???0
まだ　test/p.so はいってない　@bg30
ソケットのとこ書き直してデバッグ必要な予感、

作業にとりかかってみよう、そうしよう。
2010/08/09(月) 21:48:17ID:j4lTZLZ9P?PLT(91350)
そういや一本になったら外部用はどうなるんだろ？
2010/08/09(月) 21:50:10ID:???P
では、待ち。
527ちきちーた ★
垢版 |
2010/08/09(月) 21:51:39ID:???0
やってみた

http://bg30.2ch.net/test/p.so/qb5.2ch.net/operate/
2010/08/09(月) 21:52:31ID:???P
はやっ。行ってきまーす。
2010/08/09(月) 21:53:30ID:+bVUWBSW0
c-test 65.023
bg30 33.642

bg21 16.510
bg22 6.324
bg23 7.872
bg24 7.571

プライベート側
bg21 20.894
bg22 18.591
bg23 22.600
bg24 14.884

c201 25.571
c202 25.391
c203 25.817
530ちきちーた ★
垢版 |
2010/08/09(月) 21:56:24ID:???0
なにかへんだぞ
2010/08/09(月) 21:56:55ID:ZEcVEM+30
>>525
一本化の仕方にもよるんじゃ無いですかね。
jailみたいな仮想2鯖方式なら多分外からでもBGにリクエスト出来る気がするし。

でも外部用のリクエストも一緒にして捌けるかはアレなので、当分は外部用は外部用で
残るんじゃ無いのかな。
532ちきちーた ★
垢版 |
2010/08/09(月) 21:59:27ID:???0
気のせいか、
2010/08/09(月) 22:00:56ID:???0?PLT(25123)
>>404
そんな感じにしてみました。
2010/08/09(月) 22:06:05ID:n199JJL70?PLT(23457)
inetdが動いているのはちょといやんな感じ。
・・・気にしすぎ？
535ちきちーた ★
垢版 |
2010/08/09(月) 22:06:42ID:???0
>>534
bg30 ?
536ちきちーた ★
垢版 |
2010/08/09(月) 22:07:31ID:???0
bg30 43Mbps
http://traffic.maido3.com/fRDk/TNZI/OuoJ/

last pid: 4406; load averages: 0.95, 0.99, 0.80 up 0+02:03:23 06:07:22
1083 processes:1 running, 1082 sleeping
CPU: 10.5% user, 0.0% nice, 12.8% system, 0.7% interrupt, 76.0% idle
Mem: 2181M Active, 3940M Inact, 1290M Wired, 87M Cache, 807M Buf, 216M Free
Swap: 8192M Total, 8192M Free
537ちきちーた ★
垢版 |
2010/08/09(月) 22:11:24ID:???0
bg30 52Mbps


last pid: 4414; load averages: 3.56, 2.60, 1.53 up 0+02:06:59 06:10:58
1079 processes:2 running, 1077 sleeping
CPU: 10.9% user, 0.0% nice, 18.7% system, 0.6% interrupt, 69.9% idle
Mem: 2245M Active, 3816M Inact, 1287M Wired, 151M Cache, 807M Buf, 215M Free
Swap: 8192M Total, 8192M Free
2010/08/09(月) 22:11:33ID:/JNP3ZWj0
性交か
∩( ・ω・)∩ばんじゃーい
2010/08/09(月) 22:11:56ID:n199JJL70?PLT(23457)
>>535
そですー
メモリが残り僅かにも見えるけれども、こちらは「まだ」無問題そうですね♪
2010/08/09(月) 22:12:49ID:7mQPR04L0
c-　　58.036Mbps Recv
bg30 52.451Mbps Sent
541ちきちーた ★
垢版 |
2010/08/09(月) 22:13:08ID:???0
70%くらい移ったかな、
542ちきちーた ★
垢版 |
2010/08/09(月) 22:16:19ID:???0
bg30 58Mbps

last pid: 4432; load averages: 1.25, 1.84, 1.49 up 0+02:11:55 06:15:54
1079 processes:2 running, 1077 sleeping
CPU: 13.4% user, 0.0% nice, 17.9% system, 0.7% interrupt, 68.0% idle
Mem: 2328M Active, 3848M Inact, 1287M Wired, 39M Cache, 807M Buf, 212M Free
Swap: 8192M Total, 8192M Free
2010/08/09(月) 22:16:32ID:7mQPR04L0
c-　　62.504Mbps
bg30 58.396Mbps
2010/08/09(月) 22:17:23ID:???P
>>533
ありがとー
2010/08/09(月) 22:17:42ID:kWIR4sEI0
そいえばbgって/_service/に10分毎にuptimeを出力するスクリプトが動いてないけど、なぜ？
F22がなくとも動くはずだけど(cはroot謹製fakef22.shを動かして出力してるはず)
546ちきちーた ★
垢版 |
2010/08/09(月) 22:17:56ID:???0
たばこ買ってくる
2010/08/09(月) 22:23:09ID:???0?PLT(25123)
>>544
ついでにbg30対応のものも作っておいたので、extract2.cgiを呼べばいいはず。
2010/08/09(月) 22:25:54ID:n199JJL70?PLT(23457)
bg30
last pid: 4455; load averages: 2.00, 1.70, 1.53 up 0+02:19:11 06:23:10
1077 processes:1 running, 1076 sleeping
CPU: 13.6% user, 0.0% nice, 19.7% system, 1.4% interrupt, 65.4% idle
Mem: 2448M Active, 3631M Inact, 1289M Wired, 136M Cache, 807M Buf, 211M Free
Swap: 8192M Total, 8192M Free
無問題♪

c-test
last pid: 27266; load averages: 4.61, 4.82, 4.47 up 3+10:32:08 06:25:02
1384 processes:6 running, 1378 sleeping
CPU: 39.6% user, 0.0% nice, 8.1% system, 3.2% interrupt, 49.1% idle
Mem: 7887M Active, 1252M Inact, 2073M Wired, 205M Cache, 1236M Buf, 472M Free
Swap: 24G Total, 4610M Used, 19G Free, 18% Inuse, 32K In
スワップが使われているもより。
549256
垢版 |
2010/08/09(月) 22:29:33ID:ZSBmI7+h0
そうそう、これこれ。

http://qb5.2ch.net/test/read.cgi/operate/1280669783/904
904 ：まみら ★ ：2010/08/06(金) 16:56:39 ID:???P
> 華麗にスルーされてる模様なのですがphp.iniの
> extension=php_curl.dllのコメントアウトを外してもらえませんか？
> ＠c-test
2010/08/09(月) 22:31:22ID:7mQPR04L0
c-　　71.458Mbps
bg30 62.058Mbps
2010/08/09(月) 22:32:22ID:n199JJL70?PLT(23457)
c-test ん？どうした！？
last pid: 27358; load averages: 58.82, 21.43, 10.88 up 3+10:39:10 06:32:04
1427 processes:25 running, 1402 sleeping
CPU: 17.5% user, 0.0% nice, 26.4% system, 14.6% interrupt, 41.5% idle
Mem: 8894M Active, 802M Inact, 2125M Wired, 56M Cache, 1236M Buf, 12M Free
Swap: 24G Total, 5790M Used, 18G Free, 23% Inuse, 16M Out
552ちきちーた ★
垢版 |
2010/08/09(月) 22:33:10ID:???0
ほんとだ、ばさばさスワップあうとされてる。　< c-test

>>549
それは何? 誰が出来るの? どうしてするの?
2010/08/09(月) 22:33:51ID:n199JJL70?PLT(23457)
swapの影響でI/Oが詰っているのかな。@c-test
554ちきちーた ★
垢版 |
2010/08/09(月) 22:34:00ID:???0
bg30 暇になっちゃいましたね

last pid: 4494; load averages: 0.24, 1.02, 1.35 up 0+02:29:38 06:33:37
1080 processes:1 running, 1079 sleeping
CPU: 9.2% user, 0.0% nice, 20.1% system, 1.5% interrupt, 69.2% idle
Mem: 2584M Active, 3565M Inact, 1306M Wired, 50M Cache, 807M Buf, 209M Free
Swap: 8192M Total, 8192M Free
2010/08/09(月) 22:34:12ID:+bVUWBSW0
重くなった
2010/08/09(月) 22:35:41ID:n199JJL70?PLT(23457)
bg30 それに吊られて？
last pid: 4816; load averages: 9.85, 7.22, 3.97 up 0+02:31:20 06:35:19
1350 processes:1 running, 1348 sleeping, 1 zombie
CPU: 7.8% user, 0.0% nice, 14.6% system, 0.6% interrupt, 77.1% idle
Mem: 2722M Active, 3341M Inact, 1356M Wired, 77M Cache, 807M Buf, 217M Free
Swap: 8192M Total, 8192M Free
2010/08/09(月) 22:35:59ID:Y6Aj4pI30
c-testは異様にシステム関連がCPU食ってますね
危ないかも

今頃現地じゃHDDがガリゴリ言っちゃってるかな
2010/08/09(月) 22:36:31ID:7mQPR04L0
c-　　22.506Mbps
bg30 25.904Mbps
559ちきちーた ★
垢版 |
2010/08/09(月) 22:36:49ID:???0
こんどは　スワップin < c-test
24GまRAMを何に突然たくさん使ったんだ?
2010/08/09(月) 22:38:33ID:n199JJL70?PLT(23457)
ls -la /usr/local/lib/php.ini
-rw-r--r-- 1 root wheel 136 Aug 4 22:51 /usr/local/lib/php.ini
rootになれると書き換えられますー
2010/08/09(月) 22:39:46ID:???P
ちょと構文ミスってたかもです。
■ このスレッドは過去ログ倉庫に格納されています
5ちゃんねるの広告が気に入らない場合は、こちらをクリックしてください。
ニューススポーツなんでも実況