X



やっぱりc.2ch.netもパワーアップしてみよう作戦

■ このスレッドは過去ログ倉庫に格納されています
1まみら ★
垢版 |
2007/06/27(水) 23:17:13ID:???0
現行のサーバも3年ほど使ってるので、
管理人さんに新しいのを買ってもらえそうです。
と、いう事で、こちらで「わいわいがやがや」やってみましょう。

------------------------

質問・雑談スレ256@運用情報板
http://qb5.2ch.net/test/read.cgi/operate/1182209120/783-n

783 名前:ひろゆき@どうやら管理人 ★ 本日のレス 投稿日:2007/06/27(水) 19:53:56 ???0 ?

788 名前:まみら ★ 本日のレス 投稿日:2007/06/27(水) 21:10:04 ???P
>>783
c.2ch.net用の新しいサーバ買って?

790 名前:ひろゆき@どうやら管理人 ★ 本日のレス 投稿日:2007/06/27(水) 21:32:23 ???0 ?
>>788
何台ぐらいいりますかね?

794 名前:まみら ★ 本日のレス 投稿日:2007/06/27(水) 21:48:26 ???P
とりあえず調子悪いのはバック2台とフロント1台です。

そのフロント1台は新しいの来てるけど
ネットワークカードの関係でrootさんが調整中です。
何かが足りない様子です。

台数増やす事も考えて、ちょっと相談してまたお話します。
2007/06/29(金) 19:14:24ID:uAy6IkTsP
>>168
|ω・`)最後の一文リアルでワロタw
170おまいら
垢版 |
2007/06/29(金) 19:18:02ID:kaBSQ31x0
いやー慣れの問題だけですから( ´_ゝ`)エヘン
2007/06/29(金) 19:30:52ID:aBzrMMKk0
なんかしらんけどプラウザ側の資料ですが置いておきますね
ttp://age.s22.xrea.com/talk2ch/#get
172動け動けウゴウゴ2ちゃんねる
垢版 |
2007/06/29(金) 19:45:44ID:T1t1NLQ2O
よくわからんが、差分取得時のロジック改善を計画しているのか?
おまえら大変だな
173動け動けウゴウゴ2ちゃんねる
垢版 |
2007/06/29(金) 20:28:14ID:ZhsmsrbyO
期待してます><
2007/06/29(金) 20:36:10ID:+LxaReDr0?2BP(6824)
キャッシュがあるか無いかは、多分DB使った方が良さそうな♪
2007/06/29(金) 21:20:41ID:aEjN9XDaO
大坊?
2007/06/29(金) 21:23:44ID:qmQIXql70
皆さん乙です
正座して待ってますよ(・∀・)
2007/06/29(金) 21:52:37ID:A5UjveNG0
まみらって誰だよ!
2007/06/29(金) 22:00:31ID:FYO3onPf0
まみらだよ
2007/06/29(金) 23:53:33ID:/cUyV8UnO
さっぱりだけど、システムを改良しようとしてるのくらいはわかるよ
がんばってください
180動け動けウゴウゴ2ちゃんねる
垢版 |
2007/06/30(土) 00:50:36ID:6s6IDwurO
べっかんこで採用されてるgooとか言う画像変換使える様にして欲しい
結構見れない画像があるので
2007/06/30(土) 01:08:23ID:bGiqltEiP
>>180
新機能は、まだまだ後の話だな。
2007/06/30(土) 01:12:06ID:49tCX7Ew0
今は本機能の復旧が先だしな
183動け動けウゴウゴ2ちゃんねる
垢版 |
2007/06/30(土) 01:17:26ID:6s6IDwurO
それもそうだねf^_^;
2007/06/30(土) 01:28:58ID:7RKseqzRP
>>181
urlクッションごときに、『新機能』という表現はおかしいぞw
185動け動けウゴウゴ2ちゃんねる
垢版 |
2007/06/30(土) 03:56:32ID:zQgNKEjVO
べっかんこは変な昨日付きすぎで使いずらい
早く復帰をお願いします
2007/06/30(土) 04:10:44ID:FLxt4iRpO
スレ内検索ができたらいいな。
187こうすけ ★
垢版 |
2007/06/30(土) 05:04:48ID:???0
一応、キャッシュする仕組みは作りました。(c-docomo7)
(ただしdatのみ、subjectはもうすこししてから)

188root▲▲ ★
垢版 |
2007/06/30(土) 12:36:19ID:???0?PLT(74075)
今日は後で少し時間とれるかも。

とりあえず、BG3/BG4 を落としっぱなしにしておくのもいまいちなので、
負荷で落ちているのかそうでもないのかも含めて、
一度立ち上げなおしてもらいます。

フロントの squid は落としておき、
そのうえで1.0で要請入れて、
立ち上がったら、BG の squid を落とします。

ということで、これからたんたんと。

# 個人的にはBG3/BG4のsquidは、もうBG目的では上げない気でいます。
189root▲▲ ★
垢版 |
2007/06/30(土) 12:39:24ID:???0?PLT(74075)
ちと私の都合で予定ずらして、>>188 は13:00からやります。
2007/06/30(土) 12:40:48ID:???P
>>123のスレ読んできた! 頭に入ったかどうかは謎。

>>180
cに入れるとdeny対象に入るかも。

>>187
乙です。見てこようっ。
2007/06/30(土) 12:41:13ID:pXSfVwMw0
落ちてる奴の復旧だから他に影響はないわな
頑張ってくだされ
2007/06/30(土) 12:45:21ID:???P
>>187
思ってた所と違うみたいだった。
193root▲▲ ★
垢版 |
2007/06/30(土) 12:45:56ID:???0?PLT(74075)
BG上げてもBGとしては動かさないので、
差分転送サポート & datをキャッシュするしくみをフロントで、
になるまでは、現状のままかと。

# サーバが健康なら再整備してフロントに入れることはありうるかもですが。
2007/06/30(土) 13:00:19ID:???P
>こうすけさん
if($use_cache){}の中身とcreatecacheをコピペすれば良いのかしら?
それだけで動くと思うのは素人でしょうか。

global $fh;
global $unlimited;
global $time_now;
global $use_cache;
これらがどこで定義されてるか探したほうが良いですか?
2007/06/30(土) 13:12:38ID:???P
ここまで出た話題。

【抜本的に仕組みを作り替えること】
・サーバの追加を単純にしたい。>>9
・キャリア別をやめたい。バック/フロント制をやめたい。>>10
・どのサーバも現在のバック/フロント機能を持ちたい。>>10
・BG-squid方式の是非。>>14
・パブリック=プライベート型のネットワーク方式の是非。>>14
. ⇒長所:トラフィックに強い。短所:汎用性が無い。>>14
・差分取得したい>>14,15
. ⇒BG-squid方式不可、ディスク I/O強化要。>>16,33,46
・フロントからdatを取りたい。>>15
. ⇒BG-squid方式不可、差分取得要、キャッシュ要。>>17-18
. ⇒全量転送ダメ、絶対。>>103
. ⇒取得間隔は何秒?>>105-106
・最初は差分取得する対象のサーバを限定する。>>113

【当面を乗り切る対策】
・datキャッシュ方式の再チャレンジ。>>21,29
・仕組みを守る動作(アクセスコントロール)を入れたい。>>29
・メモリキャッシュorディスクキャッシュの充実。>>46
・今生きてるサーバで非BG-squidをやろう!>>100-103

【その他】
・電源大丈夫?>>36
・管理人の懐具合。>>36
・さらに機能を削減する。>>65
2007/06/30(土) 13:13:26ID:???P
ここまでのスペック。

台数:未定。BG×3&FEnd×9説浮上。
種類:全部同じの(T-BANANA相当?)
OS:最新?
CPU:Xeon 2.8GHz dual以上。Core2?。AM2dualはマザボに注意。
メモリ:2GBytes以上。4GBにします?
HDD容量:200GBytes IDE HDD x 1以上
ディスク I/O の性能:強くて安定してて枯れてるの
NIC:1枚でもいいかもしれない。現状は2枚。
電力:沢山

<<宿題>>
T-BANANA相当のスペックを調べてくる。I/F:SATA
197動け動けウゴウゴ2ちゃんねる
垢版 |
2007/06/30(土) 13:15:24ID:6s6IDwurO
>>190
denyって何ですか?
2007/06/30(土) 13:16:26ID:sSoiPRWQ0
アク禁

というか、コピペでだけで完璧に動くコードを見てみたい・・・w
2007/06/30(土) 13:17:31ID:???0
>>194
基本的にはそのはずです。
global は test.php で定義しています。
$fh はゴミですね。
2007/06/30(土) 13:18:49ID:pXSfVwMw0
denyとはこの手の用語で制限のこと
アクセス規制の意味がある
201動け動けウゴウゴ2ちゃんねる
垢版 |
2007/06/30(土) 13:28:05ID:6s6IDwurO
>>200
て事は採用は難しいって事ですかね?
2007/06/30(土) 13:32:33ID:???P
>>199
わーい。そしたら何とか出来そう!

今はrootさんが見てると思うので触らないです。

>>201
採用するのは全然かまわないけど、すぐに見れなくなるかもね?って話です。
203root▲▲ ★
垢版 |
2007/06/30(土) 13:35:08ID:???0?PLT(74075)
>>202
フロントのsquid切ってある => 外にとりに行かない
ので、フロントのプログラム部分は触ってもかまいません。
204root▲▲ ★
垢版 |
2007/06/30(土) 13:36:32ID:???0?PLT(74075)
で、BGが何らかの結論を見たら、
当面の方針とか、そのへんを。
205root▲▲ ★
垢版 |
2007/06/30(土) 13:40:38ID:???0?PLT(74075)
>>202-203 補足

要請は 1.0 でしているので、「1.0 の対応」になります。
なので、フロントの改変とかは、すすめていただければokかと。

ただし、現状どのフロントもT-bananaよりパワー弱いので(特にHDD)、
その範囲内でということで。
206動け動けウゴウゴ2ちゃんねる
垢版 |
2007/06/30(土) 13:41:31ID:6s6IDwurO
>>202
ソフトバンクには有り難いので是非採用して頂きたい、他のだと画像が小さいので
207root▲▲ ★
垢版 |
2007/06/30(土) 14:00:52ID:???0?PLT(74075)
tiger512は遠隔リブートで上がりました。(squid上がらないようにしました)

tiger511は遠隔リブートでは上がらなかった模様。
その旨を伝え、チェック・対応を依頼しました。
2007/06/30(土) 14:19:28ID:???P
>その範囲内
またムツカシイ事を言われてしまった。

docomo7のtest.php見てきます。
getres.phpに該当部分はもう貼ってもいいのかな?
2007/06/30(土) 14:30:12ID:KVeKMP4G0
携帯からの接続は、通信が遅いせいでApacheのスロットがなかなか解放
されないのが問題なんだよね? スロットが開放されないと裏方も解放
されないから、メモリも余計に使うと。

そうならば、80番ポートで一時受付させる"リレープロセス"を走らせて、
裏で走っているApache(別ポートに変更)にリレーするようにしたら
どうかな?
リレープロセス〜Apache間はデータの受け渡し時のみ接続して"さっさ
と切断"させる。あとはリレープロセスがマターリ携帯にデータを送ると。

リレー側はなるべく軽くして大量に掃けるようにする必要はあるけど、
こうすればApache側の負荷は軽減すると思うよ。その気になればリレー
側で流入量の制御も出来るだろうし。
210動け動けウゴウゴ2ちゃんねる
垢版 |
2007/06/30(土) 14:32:29ID:l42Qu4HgO
おい、早くパワーアップさせろや
2007/06/30(土) 14:33:57ID:pXSfVwMw0
>>210
帰れ、作業の邪魔だ
2007/06/30(土) 14:45:18ID:???0?PLT(74075)
>>209
> 携帯からの接続は、通信が遅いせいでApacheのスロットがなかなか解放
> されないのが問題なんだよね? スロットが開放されないと裏方も解放
> されないから、メモリも余計に使うと。

これはまさによく言われていることですね。
KeepAlive とかは当然offだったりします。
httpd が売り切れないようにいろんなチューニングするのは、
結構もう実施していたりするです。

ただ、今回のcはそれが問題というより、
別のところ(そもそもの処理の重さ)の問題の方が大きいかなと。

> そうならば、80番ポートで一時受付させる"リレープロセス"を走らせて、
> 裏で走っているApache(別ポートに変更)にリレーするようにしたら
> どうかな?

これ、一時期試してみようと思ったことあるです。
squid あたりを HTTP アクセラレータにするとか、そんなかんじですかね。

で、うまくsquidにボリュームがつけられれば、
死ぬまで受け入れることにはならないと。
2007/06/30(土) 14:51:13ID:???0?PLT(74075)
で、一時期 >>209 >>212 を試してみようと思ったけどやめたのは、
eAccelerator 入れて、BG方式にしてフロントでのディスクI/Oをやめた結果、
httpd の売り切れの症状が出なくなったことからですね。

でも今後差分取得が実装でき次第、
各フロントでdatキャッシュ持たせる方向だと思うので、
再度試してみる価値はあるかも。
214動け動けウゴウゴ2ちゃんねる
垢版 |
2007/06/30(土) 14:52:31ID:jhhFYQ9WO
パワーアップするのはいいが
まさかべっかんこ並みに派手にするつもりとか?
1ページ当たりの容量が増えたら携帯に保存されたキャッシュも
すぐ消えてなくなるし困る
2007/06/30(土) 14:55:15ID:???0?PLT(74075)
>>214
当面は機能追加よりも「安定志向」だと思っているです。
高機能なものが使いたければ、そういうメニューは既にあるわけで。
2007/06/30(土) 14:59:27ID:KVeKMP4G0
>>212

> これ、一時期試してみようと思ったことあるです。
> squid あたりを HTTP アクセラレータにするとか、そんなかんじですかね。

普通のリバースプロキシだと、携帯側との接続が切れないと内部側とも
切断しないんじゃないかな?とか思ってます。
なるべく早くApacheを切断してあげるのが肝かと思ってます。

> ただ、今回のcはそれが問題というより、
> 別のところ(そもそもの処理の重さ)の問題の方が大きいかなと。

orzもそれで悩んでいるみたいですね。(キャッシュ検索あたり)
まだまだアクセスが伸びるだろうし、輻輳時に落とさない仕組みが必要に
なりそうですね。
2007/06/30(土) 15:02:51ID:???0?PLT(74075)
>>216
> 普通のリバースプロキシだと、携帯側との接続が切れないと内部側とも
> 切断しないんじゃないかな?とか思ってます。

うーむ、そうかも。

Apache status で w になっているやつが多くなると、危険ですね。
携帯も網が早くなったせいか以前ほどには
「てめー早く受け取りやがれゴルァ」みたいなのは多くないですが、
本質は変わらないですからね。

一番いやんなのは昔どっかにも書いたけど、
リンク押した直後に圏外のところに逃げちゃうことかなと。
(地下鉄とか?)
2007/06/30(土) 15:09:18ID:KVeKMP4G0
> 一番いやんなのは昔どっかにも書いたけど、
> リンク押した直後に圏外のところに逃げちゃうことかなと。
> (地下鉄とか?)

地下鉄で通勤しているのでよくやってるw
あれはやっぱりサーバには良くなかったのか orz
2007/06/30(土) 15:19:55ID:7BaO2y5j0?PLT(15011)
>>217
JMだとW状態のまま10000秒以上のこっちゃってるやつがあるんですが、
強制的に切断させるのってどう設定すればいいんですかねぇ。
2007/06/30(土) 15:21:32ID:???0?PLT(74075)
Timeout 5

とか httpd.conf に書くんではだめなんだっけ。>>219
2007/06/30(土) 15:23:14ID:7BaO2y5j0?PLT(15011)
>>220
やってますけど、意味が無いみたいな・・・
2007/06/30(土) 15:23:53ID:pXSfVwMw0
今日も携帯スレは賑やかだわ
2007/06/30(土) 15:39:40ID:E8gdf12Z0
各板から、「携帯で書けねーぞゴルァ!」 な人たちを誘導してるからなぁ
2007/06/30(土) 15:42:37ID:???0?PLT(74075)
tiger511 も上がりました。(squid上がらないようにしました)
フロントのsquidを上げました(誘導かかるようになったかと)。

ちと、しばらくオフライン。
2007/06/30(土) 15:43:30ID:???0?PLT(74075)
で、

>>208
混乱させてしまってごめんなさい。
私のほうの作業はいったん終わりなので、
フロントのほう、みていただいてOKです。
2007/06/30(土) 16:07:37ID:???P
global $unlimited;
global $fh;
の処理がまだよく分かんないけど、やっちゃいますね。(管理人式)
2007/06/30(土) 16:11:05ID:???0
>>226
global $unlimited;
保持するキャッシュの数です。

global $fh;
ゴミなので消しちゃって良いです
2007/06/30(土) 16:13:35ID:???P
>>227
docomo7のtest.phpにはunlimitedの文字が無かったんですけど、
そのままだったらマズかったかしら?
2007/06/30(土) 16:17:26ID:???0
>>228んじゃ、100くらいにしときましょう
test.phpの先頭に書き込んでください。
そのうち、板ごとに設定しましょう
2007/06/30(土) 16:28:57ID:???0
subjectはとりあえずproxyなしに変えますね。
2007/06/30(土) 16:30:12ID:???P
>>229
100にしましたー。

getsubjectの方が差分に対応してないみたいなので、
まだエラー出てるみたい?
2007/06/30(土) 16:31:12ID:???P
わかったー。docomo7のコピーしますね
2007/06/30(土) 16:35:01ID:yyw8NnLJ0
subject.txtって毎回全更新だから差分取りする必要ない気が。
最終更新時間の判定だけでいいのでは?
2007/06/30(土) 16:36:11ID:???0
>>231-232
んじゃ、キャッシュ格納ディレクトリを作ります
2007/06/30(土) 16:37:17ID:zh/l0Wkz0?2BP(5890)
>>219
RLimitcpuは設定した?httod.confに。
2007/06/30(土) 16:37:51ID:???0
>>233
面倒だから単にproxy通そうかなと思ってたりして、、、
2007/06/30(土) 16:47:36ID:???P
>>232
終わったー
2007/06/30(土) 16:49:50ID:???0
>>237
おつです。
2007/06/30(土) 17:13:01ID:7BaO2y5j0?PLT(15011)
>>235
してなかったですー。
ということでしてみた
2007/06/30(土) 17:14:04ID:yyw8NnLJ0
乙です!>こうすけさん、まみらさん

>>236
なるほど
2007/06/30(土) 17:15:21ID:???P
なんで>>1が常に出るようになったのかしら?
getres.phpの比較してみたんだけど、
思い当たるフシがありません。
# ちなみにNoEditorというのを使ってみる事にしました。
2007/06/30(土) 17:16:02ID:???P
>>241
今はこうすけさんが対応されて直ってます。
2007/06/30(土) 17:17:57ID:???0?PLT(74075)
とりあえずしばらくオンライン。

現状、どうなんでしたっけ。
2007/06/30(土) 17:18:01ID:???P
>>242
じゃない。どこ直したのか教えてください。
2007/06/30(土) 17:19:18ID:???P
>>243
現状は機能削減版i2chが7台あるみたいな感じです。
2007/06/30(土) 17:20:39ID:???0?PLT(74075)
>>245
フロントで動き出したと。

差分取得は動いているですか?
2007/06/30(土) 17:22:16ID:???0
>>242
$content .= readdat($no,$r[$no]);
ここで1が強制的に書き込まれていた。
1の内容はキャッシュに埋め込まれていて、同じ変数$contentで読み込んでいたので、
1の内容の次に従来の表示が追記されてしまっていました。
$content1 .= readdat($no,$r[$no]);
と言うように別の変数にして対応したよ、
2007/06/30(土) 17:24:18ID:???0?PLT(74075)
あと、フロントでdatキャッシュするようにしたということは、
きっと定時クリーンナップが必要だと思います。

cronの設定とかしこむかんじで(できないようなら言ってください)。
早朝に-mtime +2ぐらいでfindして古いのを消せばおkかなと。
2007/06/30(土) 17:25:32ID:???0
>>246
差分取得は動いています。(i2chそのままぱくりですから)
今はキャッシュゼロの状態なのでがりがり溜め込んでいる状態です。
暫くすれば落ち着くと思われます。
2007/06/30(土) 17:27:44ID:???0
>>248
特に必要ないですよ。
今は各板で100個のキャッシュを持っていて101個目をキャッシュするときに
一番古い(アクセスしていない)キャッシュを捨てる仕組みが入っています。
2007/06/30(土) 17:28:40ID:???P
>>247
なるほど。だから1が付いてたんですね。
勝手に消してごめんなさい。
2007/06/30(土) 17:29:31ID:???0
>>251
前やった時もそれで散々悩んだw
すっかり忘れてましたww
2007/06/30(土) 17:31:46ID:???0?PLT(74075)
>>249-250
了解です。

トラフィック等を見て掲示板サーバに負担が行かないようなら、
今日のところはこれで動かすかんじで。
2007/06/30(土) 17:32:47ID:???0?PLT(74075)
で、100個というのはきっと、tuning必要そうですね。
個人的にはもうちょっと多いほうがいいような気もしますが、
このあたりを見ながらチューニングしていくかんじで。

http://mumumu.mu/mrtgc/mrtg-rrd.cgi/traffic/
2007/06/30(土) 17:38:33ID:???0?PLT(74075)
で、これがうまくいくようなら、
今だめぽなbanana405の代替品も、
通常の(メモリ増やした)bananaでいけるのかなと。
2007/06/30(土) 17:38:52ID:???0
>>254
そうですね。
板ごとに設定してもいいかなとも思っています。
2007/06/30(土) 17:40:29ID:gSnpWmfP0
各位乙です.

キャッシュの掃除は,個数での判定や find -mtime でやる以外に,
dat 落ちを検出したら (302 や 404 が返って来たら)
消すっていう方法もありますね.
2007/06/30(土) 17:42:14ID:???0?PLT(74075)
>>257
> dat 落ちを検出したら (302 や 404 が返って来たら)
> 消すっていう方法もありますね.

これは賢いですね。
特に、実況(携帯からみんな見ているんだこれが)系には効果大かなと。
2007/06/30(土) 18:08:47ID:???0?PLT(74075)
Apacheのリスタートテスト at 各フロントしながら、負荷観測中。

[Sat Jun 30 02:08:26 2007] [notice] child pid 24126 exit signal Segmentation fault (11)
[Sat Jun 30 02:08:26 2007] [notice] child pid 24124 exit signal Segmentation fault (11)
[Sat Jun 30 02:08:26 2007] [notice] child pid 24123 exit signal Segmentation fault (11)
[Sat Jun 30 02:08:26 2007] [notice] child pid 24114 exit signal Segmentation fault (11)
[Sat Jun 30 02:08:26 2007] [notice] child pid 24104 exit signal Segmentation fault (11)

となりはじめると、httpd のリスタートが必要な状況か、、、。
2007/06/30(土) 18:10:12ID:???0?PLT(74075)
ということで、c-docomo6 と c-docomo7 の httpd を一度リスタート。>>259

フロントの squid はもう要らないはずなので、これから落とします。
2007/06/30(土) 18:13:06ID:???P
>>260
あ、グラフ見てそうかなーと思ってさっきリスタートしてしまいました。
2007/06/30(土) 18:13:16ID:???0?PLT(74075)
>>260
フロントのsquid落としました。
2007/06/30(土) 18:13:46ID:???0?PLT(74075)
>>261
了解です。そのへんは適宜。

で、OSとApacheは機を見てバージョン上げます。
2007/06/30(土) 18:15:08ID:???0
>>260
ついでにキャリア別はどうしましょうか?
全部c.2ch.netにして7台に振り分けしませんか?
2007/06/30(土) 18:15:34ID:???0
>>263
PHPも上げてください
266stream ◆PNstream2s
垢版 |
2007/06/30(土) 18:20:03ID:TaMBicmW0
いい機会だし雪だるまでおなじみのmatdも考えてみては
2007/06/30(土) 18:20:33ID:???0?PLT(74075)
>>264
そのへんの設定変更はきっと動作をみつつこれから、
というかんじですね。

必要に応じた新戦力の投入は管理人のOK出ているわけで、
どういうのがいいかもここで考えるのがいいかなと。

個人的にはキャリア別はそろそろやめる方向かなと思っていたりします。
ただ、全部フラットにするのがいいかどうかもあるかな。

matdとかが使える環境にするのがきっと一番いいんですが、
それだと、ネットワーク環境も含めて統合的に考える必要があるし。

>>265
OS上げるとなると5.x→6.xへのジャンプアップになるので、
基本的にports関係は全部入れ替えになるかと。
2007/06/30(土) 18:22:31ID:???0?PLT(74075)
で、形を「差分取得ありフロントキャッシュ型」に変更したわけで、
この状態でどのくらいの戦力なのかがわからないと、
今後の戦略も立てにくいですね。

ということで、今日は少なくともこの状況でしっかり観察して、
次の手を考えるのがいいんではないのかなと。
■ このスレッドは過去ログ倉庫に格納されています
5ちゃんねるの広告が気に入らない場合は、こちらをクリックしてください。

ニューススポーツなんでも実況