X

2ch特化型サーバ・ロケーション構築作戦 Part57

レス数が900を超えています。1000を超えると表示できなくなるよ。
NGNG
2ch特化型サーバ・ロケーション構築作戦のスレッドです。

・2ちゃんねるのサーバロケーション、PIEに関する関連作業・調整事項
・DNS登録・変更関連の各種作業や調整事項
・2ちゃんねるのサーバで採用しているOS、FreeBSDに関する情報・調整事項
・各種作戦・プロジェクトとの連携、プロジェクト間の連携

等を取り扱います。

前スレ:2ch特化型サーバ・ロケーション構築作戦 Part56
http://qb5.2ch.net/test/read.cgi/operate/1280354725/
2010/08/06(金) 02:25:13ID:8zbKq6NB0
いつもの特定のプロダイダだけ重いっていうあれでしょ
2010/08/06(金) 02:25:37ID:4ZxKzd5g0
>>813
どうやらOCN限定っぽい(自分もOCN)だから2ちゃんとは関係なさそうだった
スレ汚し失礼
2010/08/06(金) 02:26:54ID:gSkzJ9mC0
BIGLOBE
tokiデジカメ板がナンカエラーダッテ
2010/08/06(金) 02:28:15ID:eGWDlN7g0
yuzuru書き込もうとしても書き込みが吸い込まれる
二度試したからあとで連投として反映されるのだろうか?
なんでこんなことになってんだ
2010/08/06(金) 02:28:30ID:gSkzJ9mC0
そして直った
何だったんだ?
2010/08/06(金) 02:32:49ID:eGWDlN7g0
直ったか?一部のプロバだけだろうか
こちらプララ
2010/08/06(金) 02:34:34ID:hSGVygr60
operateが重いな
2010/08/06(金) 02:35:22ID:bUeUiVzk0
ニダーランも現在使い物になりません
2010/08/06(金) 02:37:13ID:OkwxsFxF0
こちらへどうぞ

重い重い重い重い重い重い重い×67@運用情報
http://qb5.2ch.net/test/read.cgi/operate/1274957211/
2010/08/06(金) 02:37:36ID:nVZhMsZQ0
こっちでヤレー
重い重い重い重い重い重い重い×67@運用情報
http://qb5.2ch.net/test/read.cgi/operate/1274957211/
情報集まってきてるぞ
2010/08/06(金) 03:19:47ID:HryCNqXSP
15日やら29日やら管談話の時を考えると思いやられるな・・・
2010/08/06(金) 09:46:38ID:hRlgL30x0
tiger3554 が 1Gbps になってる
http://traffic.maido3.com/i6Br/Rnt3/JYBP/
今日のテストにwktkせずにはいられない
2010/08/06(金) 10:39:33ID:Bw9DPAu+0
グラフの数字が・・
2010/08/06(金) 10:49:20ID:e0HQnXZN0
k・・・?
2010/08/06(金) 10:58:24ID:MfYjHZ/F0
k・・・・
829む@出先
垢版 |
2010/08/06(金) 11:00:21ID:XPYz0VeD0
1Gbpsにするのと合わせて、
IPアドレスを変更しようとしているみたいですね。< tiger3554
matd動かせるようにするために、206.223.150.* にしようとしているのかな。

ということは、転送量グラフも変わるのかな。

で、まだ作業中かもしれないですが、
/etc/resolv.conf が旧いままなので、
逆引きとかがしくっていて、ログインにとても時間がかかる様子。

# 今日は厄日な予感も。<私
2010/08/06(金) 11:03:40ID:bxpxTiRs0
む▲▲▲
2010/08/06(金) 11:25:50ID:hRlgL30x0
c-test.2ch.net は [206.223.150.75] に変わってるのですね
tiger3554.maido3.com [206.223.149.210]
2010/08/06(金) 12:29:10ID:joEVD+xS0
c-testはccgirlsに名前をかえてください、おねがいします
833む@出先
垢版 |
2010/08/06(金) 13:01:59ID:XPYz0VeD0
>>829
> /etc/resolv.conf が旧いままなので、

正しく変わった模様。

・IPアドレス変更 206.223.150.75 になった
・接続が 1Gbps になった

で、1Gbps にしたので、/etc/sysctl.conf のこれを有効にするのがよさげ。

コメントはずして、
/etc/rc.d/sysctl restart

でいけるはず(リブート不要)。
## additional network settings for 1Gbps connection
## http://fasterdata.es.net/TCP-tuning/FreeBSD.html
#net.inet.tcp.sendbuf_max=20480000
#net.inet.tcp.recvbuf_max=20480000
##net.inet.tcp.sendbuf_auto=1 # Send buffer autotuning enabled by default
#net.inet.tcp.sendbuf_inc=16384
##net.inet.tcp.recvbuf_auto=1 # Receive buffer autotuning enabled by default
#net.inet.tcp.recvbuf_inc=524288
#net.inet.tcp.inflight.enable=0
834む@出先
垢版 |
2010/08/06(金) 13:23:29ID:XPYz0VeD0
>>833
設定入った様子。

あと特に問題なければ、たぶんこれで今日の実験の準備は整ったはず。
835ちきちーた ★
垢版 |
2010/08/06(金) 14:10:43ID:???0
はじめからの流れとか、状況の変化、はたまた心境とかも書かなきゃですね。

始まりは・・・ なんでしたっけ、何作戦だったかなぁ、大黒埠頭とかのやつ
それを立ち上げていろいろやっていたら「私がそれをやるから、」と言われてまぁ追い出されて、
うまく行っているのかなぁと思っていたら「なんとかしないなら貴方を切ります」と言われて、
「僕自分でできるもん」じゃなかったのかい・・・
まぁそんなこんなで現c+bgを急遽作り上げて、思っていること全部は実装できなかったけど
今動いてる訳です。めでたしめでたし

時代は下り 2010年暑い夏。
2010/08/06(金) 14:14:07ID:Wl7usRzdP
Love Affair?
837ちきちーた ★
垢版 |
2010/08/06(金) 14:24:24ID:???0
まず注目したいことは、記憶場所の大きさとスピードとコストなんです。
現 C+BG を作った当時
「自前のHDD よりも隣のサーバから通信でデータを持ってきた方が速い。」という状況でした。
自前のHDDからのデータはmsオーダ、隣のサーバからはnsオーダ、それが C+BGとか雪だるまに
気持ちが向かう大きな理由(と書いて'わけ'と読む)だったんですね、
細かい議論はいろいろあると思うけど、作り上げ・運用し一つの結果を出してきたということで、

ところが、状況一変。
自前の /md とかSSD こりゃたまげた!
速い、安い、使える。大鑑巨砲時代の訪れか、

BG部分なんてキャッシュデータを全部メモリ(/mdか? 違う違う動的に確保するプログラム内のメモリ)
でまかない、賢くキャッシュ管理しすれば・・・
さらに昨日の実験を見ても分かるように'無駄な'転送大杉。
C(PHP)が欲しいデータだけを、同居のBG部分が送り出してあげれば、、
たぶん欲しいデータは subject.txtとか .dat の何行目から何行目と思っとります。
かなりデータ転送へるぞー

さて識者の方々どう思います?
838む@出先
垢版 |
2010/08/06(金) 14:29:22ID:XPYz0VeD0
>>835
携帯周りについてはこれまで、
いろいろな人のいろいろな思惑(?)が、
いろいろとうごめいていたような気がしているです。

r.iしかり、cしかり、p2しかり、u.la → ula.ccしかり、i.bbspink.comしかり、あれや、これや、それや、どれや?

現状がめでたいのかめでたくないのかは、私にはよくわかりません。
誰が得して誰が損しているのかも、私にはよくわかりません。

個人的にはいずれにせよ、原理原則に従い、
自らの信じた道を堂々と進むのがいいのかなと、思っております。
2010/08/06(金) 14:35:15ID:sigkUSsO0
どばーって展開しておいて、小さくすくうイメージ。

面白そうだ。
840む@出先
垢版 |
2010/08/06(金) 14:37:31ID:XPYz0VeD0
フロントとBGの機能を1台で兼任させるのって、
same.ula.cc (今はspeedo.ula.ccですかね)とかで、
やってきていたのではないかと思うんですね。

で、それはそれなりに機能していたような気がするわけです。
(ula.ccは2ちゃんねるじゃないので、私には、外からしかわからないです)

しかし、その構成だとHDDが先に飽和して、パフォーマンスの点で微妙な部分があった。
という気がするわけです。
このあたりが上記のちきちーたさんの書き込みにつながる部分なのかなと思ったりします。

しかし、時代は変化し、大容量のメモリやメモリディスクを容易に手に入れられるようになり、
読み出し性能がものすごくアップするSSDという新兵器も、かなり容易に手に入るようになった。

こうなってみると、ネットワークで転送するよりも、自分の中の同居人に頼む形
(たぶんそれは、same.ula.ccがやっている形よりもさらに一歩先を行くのでしょう)
のほうがよりよくできるのではないか、ということなのかなと思うわけです。

ということで、それがめざす王道なのかもしれないのかなと。

(続く)
2010/08/06(金) 14:39:50ID:YfbyabLQ0
>>837
i.cgi (C)を各鯖に入れるに一票。人大杉の問題は気合で。
842む@出先
垢版 |
2010/08/06(金) 14:43:10ID:XPYz0VeD0
で、一方BGモデルには、複数台のフロントでうまくキャッシュを共有できる、
というメリットがあるです。

しかし、そのメリットと、そのために払うコストの兼ね合い、
というのも考えどころなのかもしれません。

あと、巨艦主義、なんていう言葉が上でも出てきましたが、
1台ですむなら1台の方がいいじゃん、という話もあったりします。
例えば、雪だるまはそれなりに機能したシステムだったわけですが、
同じことを1台でまかなえるなら、運用的にはその方が楽だったりする面も多々あります。

で、1台、せいぜい2台のハイブリッドtigerでcの機能をまかなえるとしたら、
それぞれで同じdatをキャッシュするとかしても、払うコストは、
それほど大きくならないのかもしれないです。

とりあえず、思うところをリロードしないで書いてみた。
843む@出先
垢版 |
2010/08/06(金) 14:44:38ID:XPYz0VeD0
>>841
新鮮な発想ですね。r.iの時代に戻ると。

携帯はいまやもう、隔離する必要ないんじゃね、
っていうことですか。
2010/08/06(金) 15:01:40ID:VcVDFJ1P0
携帯を隔離していた元々の理由は,転送が遅いため
いつまでも httpd をつかまれた状態になってしまうからでしたっけ?
その辺の問題も,今は個別のサーバでさばけるようにできるということなら
それが一番シンプルなのかもですね.
2010/08/06(金) 15:02:49ID:eRQReCH90
ライブスレッドを全部収容するのに必要なキャッシュ容量を考えてみる
掲示板の数:772板くらい
ライブスレッド数/板 の平均:500(根拠なくてきとーに)
ということにすると、ライブスレッド数は772×500=386,000

スレッドの平均容量:256KB(根拠なくてきとーに)
とすると、datは94GBくらい
2010/08/06(金) 15:05:35ID:PqunwSXn0
大きくても200GB弱ってことか
2010/08/06(金) 15:07:29ID:YfbyabLQ0
>>845
パレートの法則適用して19GBぐらい(根拠なくてきとーに)
848ちきちーた ★
垢版 |
2010/08/06(金) 15:10:03ID:???0
その辺のことをにらみつつ当面基礎実験やっておきましょ
本日はtiger3554の1G接続で c.2ch.netの一台での運用
2010/08/06(金) 15:13:44ID:Na/jlnGc0
1Gbps用の新しいtiger3554.maido3.com の転送量グラフです。
http://traffic.maido3.com/i6Br/Rnt3/JYBP/1gbps/
850ちきちーた ★
垢版 |
2010/08/06(金) 15:15:15ID:???0
last pid: 3254; load averages: 0.00, 0.00, 0.00 up 0+03:22:02 23:14:56
1077 processes:1 running, 1076 sleeping
CPU: 0.0% user, 0.0% nice, 0.0% system, 0.0% interrupt, 100% idle
Mem: 810M Active, 30M Inact, 1247M Wired, 16K Cache, 1007M Buf, 9801M Free
Swap: 24G Total, 24G Free
2010/08/06(金) 15:16:15ID:???P
はーい、PHP変更無いのでいつでもおkです。>>848
852ちきちーた ★
垢版 |
2010/08/06(金) 15:16:33ID:???0
http://c-test.2ch.net/

なんかワーニングがでてるけど、問題なし?
853ちきちーた ★
垢版 |
2010/08/06(金) 15:17:10ID:???0
Warning: file_get_contents(im-ad1.txt) [function.file-get-contents]: failed to open stream: No such file or directory in /home/ch2c/public_html/00.p on line 21

Warning: file_get_contents(im-ad2.txt) [function.file-get-contents]: failed to open stream: No such file or directory in /home/ch2c/public_html/00.p on line 22

Warning: file_get_contents(im-ad41.txt) [function.file-get-contents]: failed to open stream: No such file or directory in /home/ch2c/public_html/00.p on line 23

Warning: file_get_contents(im-ad99.txt) [function.file-get-contents]: failed to open stream: No such file or directory in /home/ch2c/public_html/00.p on line 24
2010/08/06(金) 15:18:29ID:???P
>>852
広告が消えてますね。見てきます。
2010/08/06(金) 15:20:39ID:???P
広告、仮に入れてきました。
856ちきちーた ★
垢版 |
2010/08/06(金) 15:24:18ID:???0
ワーニング消えた、
http://c-test.2ch.net/

んじゃ DNS 変更しまーす
2010/08/06(金) 15:26:26ID:???P
広告はメモリディスクに入ってるので定時にPUTされないと、リプートで消えます。
このまま使うのであれば、いつもの所に置いてもらう設定が必要ですね。
858ちきちーた ★
垢版 |
2010/08/06(金) 15:27:54ID:???0
こっちから言うことないんじゃねーのw
859ちきちーた ★
垢版 |
2010/08/06(金) 15:31:24ID:???0
切り替えました
2010/08/06(金) 15:34:29ID:7OzMacNPP
>>859
1Gbpsで接続されてるみたいだけど、
http://hayabusa-1gbpsgraph.maido3.com/
の方にはグラフ設置しないの?
2010/08/06(金) 15:36:34ID:Wl7usRzdP
>>860
>>849
http://traffic.maido3.com/i6Br/Rnt3/JYBP/1gbps/

早速Recvが160Mbps突破
862ちきちーた ★
垢版 |
2010/08/06(金) 15:37:10ID:???0
last pid: 3324; load averages: 2.51, 1.59, 0.76 up 0+03:44:07 23:37:01
1080 processes:4 running, 1076 sleeping
CPU: 24.4% user, 0.0% nice, 5.2% system, 2.3% interrupt, 68.1% idle
Mem: 1361M Active, 434M Inact, 1315M Wired, 16K Cache, 1030M Buf, 8780M Free
Swap: 24G Total, 24G Free
2010/08/06(金) 15:38:19ID:7OzMacNPP
>>861
そういう事ね
大体把握
2010/08/06(金) 15:39:18ID:???P
おや?BGのpublic側が反応してる。。。
865ちきちーた ★
垢版 |
2010/08/06(金) 15:43:47ID:???0
C -public接続- BG - 2ちゃんねる
だからそれでいいんじゃないかな
2010/08/06(金) 15:47:14ID:???P
はい。了解しました。
867ちきちーた ★
垢版 |
2010/08/06(金) 15:48:40ID:???0
217Mbps (in)

last pid: 3366; load averages: 2.49, 2.56, 1.78 up 0+03:55:26 23:48:20
1092 processes:2 running, 1090 sleeping
CPU: 25.1% user, 0.0% nice, 4.4% system, 2.1% interrupt, 68.4% idle
Mem: 1365M Active, 609M Inact, 1367M Wired, 16K Cache, 1076M Buf, 8548M Free
Swap: 24G Total, 24G Free
2010/08/06(金) 15:50:24ID:sigkUSsO0
各BGが60Mか。
2010/08/06(金) 16:07:23ID:PqunwSXn0
ちゃっかりと(異常の無いデータでの)グラフの最高記録更新か
870ちきちーた ★
垢版 |
2010/08/06(金) 16:08:10ID:???0
246M (in)

last pid: 3461; load averages: 3.66, 3.41, 2.88 up 0+04:14:25 00:07:19
1101 processes:6 running, 1095 sleeping
CPU: 25.9% user, 0.0% nice, 5.1% system, 2.3% interrupt, 66.6% idle
Mem: 1379M Active, 668M Inact, 1454M Wired, 16K Cache, 1158M Buf, 8388M Free
Swap: 24G Total, 24G Free
2010/08/06(金) 16:13:38ID:/rBTOz+5O
>>835
懐かしかねー
872ちきちーた ★
垢版 |
2010/08/06(金) 16:19:22ID:???0
http://traffic.maido3.com/PtyR/0rOr/VIdj/
c202 の転送量をみるに、概ね切り替わったのかな、

>>836
>>871
そうそう Love Affair だった
最後のシーガーデンディアンまで行かなかったんだったかなぁ
2010/08/06(金) 16:19:47ID:WtnG3JoX0
夕立ちでも来ると携帯からのアクセス増えますかね?
2010/08/06(金) 16:22:00ID:PqunwSXn0
268.925Mbps
夜10時あたりに400Mbps超えそうですね
875む@出先
垢版 |
2010/08/06(金) 16:24:00ID:XPYz0VeD0
席に戻った。
876ちきちーた ★
垢版 |
2010/08/06(金) 16:25:30ID:???0
269Mbps

last pid: 3535; load averages: 2.89, 3.24, 3.09 up 0+04:31:51 00:24:45
1122 processes:4 running, 1118 sleeping
CPU: 28.8% user, 0.0% nice, 4.7% system, 2.2% interrupt, 64.3% idle
Mem: 1425M Active, 726M Inact, 1541M Wired, 16K Cache, 1236M Buf, 8197M Free
Swap: 24G Total, 24G Free

CPU等は十分に足りているって感じ?
2010/08/06(金) 16:25:35ID:cprEpyml0
次はbgか
878む@出先
垢版 |
2010/08/06(金) 16:26:06ID:XPYz0VeD0
あ、暴発。
本業でちと席はずしていたです。

広告か。
c-test.2ch.net への配布、とりあえず追加しておいたです。
2010/08/06(金) 16:26:19ID:ttyOEEP90
携帯の規制が全部解除されたらヤバくね?
2010/08/06(金) 16:27:55ID:sigkUSsO0
ハイブリッドtigerの底力は凄げー。
携帯からのアクセスが怖いー。

>>786 がそのまま進むと来年の年末ぐらいには、
2010/08/06(金) 16:28:11ID:???P
>>878 ありがとうございます。
882む@出先
垢版 |
2010/08/06(金) 16:28:52ID:XPYz0VeD0
全キャリア変わるまでに、結構かかったんじゃないかな。
特にau。
2010/08/06(金) 16:31:53ID:UOPKwuAz0
ここで携帯規制解除で実験実験!
884む@出先
垢版 |
2010/08/06(金) 16:33:18ID:XPYz0VeD0
ざっとログ見ると、docomo/au/SoftBank全部あるですね。

トラフィック的には、もう移ってるのかな。
885む@出先
垢版 |
2010/08/06(金) 16:36:03ID:XPYz0VeD0
旧サーバにはもう、ぱらぱらしか来ていない様子。
かなりの部分は切り替わった模様。
2010/08/06(金) 16:38:05ID:FHIIwyai0
ソフトウェア板のsubject.txtが変だ。復帰してもらうべき?
2010/08/06(金) 16:38:52ID:JutkTIjH0
hibariなんかあった?
http://traffic.maido3.com/cIo9/lSgE/pigI/
2010/08/06(金) 16:38:59ID:TD1OtzIpP
hibari鯖の復帰おながいします
2010/08/06(金) 16:39:15ID:1++qus5WP
hibari死んでるっぽいんだが…
890む@出先
垢版 |
2010/08/06(金) 16:40:26ID:XPYz0VeD0
リブート入ってますね。< hibari

%uptime
12:40AM up 9 mins, 1 user, load averages: 0.10, 0.20, 0.13
2010/08/06(金) 16:40:59ID:CKVhC8iW0
自作PC板が飛んでる件
892む@出先
垢版 |
2010/08/06(金) 16:42:11ID:XPYz0VeD0
普通にリブート入った様子。

・誰かがリセットボタン押した
・rebootコマンド入れた
・天狗じゃ以下略

Waiting (max 60 seconds) for system process `vnlru' to stop...done
Waiting (max 60 seconds) for system process `bufdaemon' to stop...done
Waiting (max 60 seconds) for system process `syncer' to stop...
Syncing disks, vnodes remaining...4 4 3 3 3 0 0 0 done
All buffers synced.
Uptime: 1d3h17m38s
Rebooting...
893む@出先
垢版 |
2010/08/06(金) 16:43:04ID:XPYz0VeD0
とりあえず、板復帰かけてみるです。< hibari
2010/08/06(金) 16:43:09ID:7OzMacNPP
rootさんって復帰かけること出来たっけ
2010/08/06(金) 16:43:17ID:1++qus5WP
>>893
頼む。
896ちきちーた ★
垢版 |
2010/08/06(金) 16:43:32ID:???0
BG - 2ちゃんねる
がΣBGで20Mbpsくらいだったのかな

巨大C(C+賢いBG) - 2ちゃんねる も20Mbpsくらいかぁ
それがいいだろなぁ、きっと

C と BGの通信方法さえ確立できれば他には壁はないかな?
そしてかなりの節約になる気がする = Cがより早くなり快適になる
広告を /md で毎回 open/closeしているなんてところが今後は効いて来ると、
2010/08/06(金) 16:44:03ID:7OzMacNPP
ああ、出来るんだね ゴメン
2010/08/06(金) 16:44:11ID:UOPKwuAz0
2010/08/06 16:30:01 LA= 4:30PM up 1 day, 3:17, 1 user, load averages: 0.12, 0.13, 0.13
2010/08/06 16:40:00 LA= 4:40PM up 9 mins, 1 user, load averages: 0.11, 0.20, 0.13
reboot誰かしたのか?
899む@出先
垢版 |
2010/08/06(金) 16:46:49ID:XPYz0VeD0
>>896
携帯は20:00(21:00かも)からが山だったりしますが、
おおむねそんなかんじなのかなと。

復帰はおわたみたい。< hibari
2010/08/06(金) 16:46:53ID:Ip6YJXcdP
>・誰かがリセットボタン押した
>・rebootコマンド入れた
>・天狗じゃ以下略

掃除のおばちゃん忘れてる。
2010/08/06(金) 16:47:45ID:WtnG3JoX0
クーラーのスイッチと間違ったのか
902ちきちーた ★
垢版 |
2010/08/06(金) 16:48:42ID:???0
>・rebootコマンド入れた

の模様です。
903む@出先
垢版 |
2010/08/06(金) 16:49:11ID:XPYz0VeD0
>>902
そうですたか。

何らかの理由があったと。
2010/08/06(金) 16:56:39ID:???P
華麗にスルーされてる模様なのですがphp.iniの
extension=php_curl.dllのコメントアウトを外してもらえませんか?
@c-test
2010/08/06(金) 16:58:18ID:7Wu8xxmm0

エラーが出てますよ
home/ch2c/public_html/s.php online 23
906ちきちーた ★
垢版 |
2010/08/06(金) 17:01:30ID:???0
>>903
単に間違ってやっちゃったらしいです
907む@出先
垢版 |
2010/08/06(金) 17:04:54ID:XPYz0VeD0
>>906
りょうかいです。
「窓いっぱい開いてリモートログインしてたりすると、ついやっちゃうんですよね。でも(りゃ」

とおつたえくださいです。
2010/08/06(金) 17:05:52ID:CKVhC8iW0
戻った戻った。
お疲れさんです。>中の人
2010/08/06(金) 17:13:18ID:cprEpyml0
295Mbps
もうすぐ300だ
2010/08/06(金) 17:15:11ID:X2XlOS3v0
>単に間違ってやっちゃったらしいです
* おおっと *
2010/08/06(金) 17:17:21ID:WtnG3JoX0
にんげんだもの
912ちきちーた ★
垢版 |
2010/08/06(金) 17:19:30ID:???0
298Mbps

last pid: 4006; load averages: 3.34, 3.68, 3.73 up 0+05:26:12 01:19:06
1184 processes:8 running, 1176 sleeping
CPU: 35.8% user, 0.0% nice, 5.9% system, 3.3% interrupt, 55.0% idle
Mem: 1562M Active, 1134M Inact, 1562M Wired, 36K Cache, 1236M Buf, 7631M Free
Swap: 24G Total, 24G Free
2010/08/06(金) 17:20:35ID:mjLI5R9x0
http://traffic.maido3.com/i6Br/Rnt3/JYBP/1gbps/

ついに300Mbps超え
レス数が900を超えています。1000を超えると表示できなくなるよ。
5ちゃんねるの広告が気に入らない場合は、こちらをクリックしてください。

ニューススポーツなんでも実況