2ch特化型サーバ・ロケーション構築作戦のスレッドです。
・2ちゃんねるのサーバロケーション、PIEに関する関連作業・調整事項
・DNS登録・変更関連の各種作業や調整事項
・2ちゃんねるのサーバで採用しているOS、FreeBSDに関する情報・調整事項
・各種作戦・プロジェクトとの連携、プロジェクト間の連携
等を取り扱います。
前スレ:2ch特化型サーバ・ロケーション構築作戦 Part57
http://qb5.2ch.net/test/read.cgi/operate/1280669783/
探検
2ch特化型サーバ・ロケーション構築作戦 Part58
■ このスレッドは過去ログ倉庫に格納されています
NGNG
php 5.2.13なのですね。。。@c-test
5.2.*はサポート終わったみたい。
ttp://www.php.net/ChangeLog-5.php#5.2.14
5.2.*はサポート終わったみたい。
ttp://www.php.net/ChangeLog-5.php#5.2.14
2010/08/09(月) 23:11:32ID:7mQPR04L0
c- 80.069Mbps
bg30 73.989Mbps
bg30 73.989Mbps
>>597
5.3.3でしたっけ >最新
5.3.3でしたっけ >最新
>>596
ディスクお触りしまくってた瞬間なのかな?
bg30
procs memory page disks faults cpu
r b w avm fre flt re pi po fr sr ad0 ad1 in sy cs us sy id
10 0 0 9794M 336M 950 5 0 0 1602 209 0 0 2828 72032 29212 6 10 84
↑ad0 ad1 が共に0
ディスクお触りしまくってた瞬間なのかな?
bg30
procs memory page disks faults cpu
r b w avm fre flt re pi po fr sr ad0 ad1 in sy cs us sy id
10 0 0 9794M 336M 950 5 0 0 1602 209 0 0 2828 72032 29212 6 10 84
↑ad0 ad1 が共に0
>>599
そうみたいですー@本家php (ttp://www.php.net)
そうみたいですー@本家php (ttp://www.php.net)
2010/08/09(月) 23:16:31ID:7mQPR04L0
c- 78.978Mbps
bg30 71.770Mbps
そろそろピークアウト、、、
bg30 71.770Mbps
そろそろピークアウト、、、
603ちきちーた ★
2010/08/09(月) 23:17:20ID:???0 bg30 もう一回
procs memory page disks faults cpu
r b w avm fre flt re pi po fr sr ad0 ad1 in sy cs us sy id
30 0 0 10147M 239M 972 5 0 0 1633 217 0 12649 2891 74248 30009 6 10 83
procs memory page disks faults cpu
r b w avm fre flt re pi po fr sr ad0 ad1 in sy cs us sy id
30 0 0 10147M 239M 972 5 0 0 1633 217 0 12649 2891 74248 30009 6 10 83
2010/08/09(月) 23:21:15ID:7mQPR04L0
c- 79.942Mbps
bg30 71.753Mbps
bg30 71.753Mbps
c-test
$ vmstat 1 5
procs memory page disks faults cpu
r b w avm fre flt re pi po fr sr ad0 ad1 in sy cs us sy id
6 0 10 22977M 1208M 133 1 0 1 91 517 0 0 2217 3742 14293 6 2 92
6 0 10 22977M 1208M 11 0 0 0 4 0 0 2 14513 286103 81602 51 14 35
10 0 10 22979M 1207M 725 0 0 0 0 0 0 1 14607 293383 81249 53 15 32
9 0 10 22979M 1207M 4 0 0 0 0 0 0 1 14357 283397 80862 49 15 36
17 0 10 22979M 1207M 520 0 0 0 2 0 0 2 15182 292539 84575 50 15 35
bg30
$ vmstat 1 5
procs memory page disks faults cpu
r b w avm fre flt re pi po fr sr ad0 ad1 in sy cs us sy id
9 0 0 9917M 345M 986 5 0 0 1653 227 0 0 2933 75745 30543 7 10 83
13 0 0 9925M 341M 1906 2 0 0 2959 0 0 84 6128 186800 69987 16 29 55
13 0 0 9926M 338M 2220 5 0 0 2883 0 0 56 6124 188777 71359 16 26 59
11 0 0 9925M 340M 1940 9 0 0 4105 0 0 34 6061 189835 70735 15 29 56
12 0 0 9920M 337M 2386 31 0 0 3082 0 0 83 6081 200139 72468 14 28 58
$ vmstat 1 5
procs memory page disks faults cpu
r b w avm fre flt re pi po fr sr ad0 ad1 in sy cs us sy id
6 0 10 22977M 1208M 133 1 0 1 91 517 0 0 2217 3742 14293 6 2 92
6 0 10 22977M 1208M 11 0 0 0 4 0 0 2 14513 286103 81602 51 14 35
10 0 10 22979M 1207M 725 0 0 0 0 0 0 1 14607 293383 81249 53 15 32
9 0 10 22979M 1207M 4 0 0 0 0 0 0 1 14357 283397 80862 49 15 36
17 0 10 22979M 1207M 520 0 0 0 2 0 0 2 15182 292539 84575 50 15 35
bg30
$ vmstat 1 5
procs memory page disks faults cpu
r b w avm fre flt re pi po fr sr ad0 ad1 in sy cs us sy id
9 0 0 9917M 345M 986 5 0 0 1653 227 0 0 2933 75745 30543 7 10 83
13 0 0 9925M 341M 1906 2 0 0 2959 0 0 84 6128 186800 69987 16 29 55
13 0 0 9926M 338M 2220 5 0 0 2883 0 0 56 6124 188777 71359 16 26 59
11 0 0 9925M 340M 1940 9 0 0 4105 0 0 34 6061 189835 70735 15 29 56
12 0 0 9920M 337M 2386 31 0 0 3082 0 0 83 6081 200139 72468 14 28 58
c-testは、遊んでいるときと働いているときの格差が大きいような。
bg30は、格差がやや少ない目みたいな感じ。
bg30は、格差がやや少ない目みたいな感じ。
607root▲▲ ★
2010/08/09(月) 23:23:30ID:???0608root▲▲ ★
2010/08/09(月) 23:24:20ID:???0 今どんな状態?
c-test - bg30 - 2ch
接続はすべてパブリック側
であっている?
c-test - bg30 - 2ch
接続はすべてパブリック側
であっている?
609ちきちーた ★
2010/08/09(月) 23:24:55ID:???0 >>608
はい
はい
610root▲▲ ★
2010/08/09(月) 23:27:28ID:???0 bg30は概ね健康に動いているっぽい。
一度c-testをリブートしたいですね。
何らかのしくりでスワップを使ってしまい、
そのままつぼっているような感じがします。
一度リブート入れてもやっぱりスワップ使うようなら、
次は、httpdの数を減らす方向な予感。
一度c-testをリブートしたいですね。
何らかのしくりでスワップを使ってしまい、
そのままつぼっているような感じがします。
一度リブート入れてもやっぱりスワップ使うようなら、
次は、httpdの数を減らす方向な予感。
611ちきちーた ★
2010/08/09(月) 23:28:27ID:???0 >>610
よろしくコントロールお願いします。
よろしくコントロールお願いします。
612root▲▲ ★
2010/08/09(月) 23:28:49ID:???0 もう少し様子観察して、(thinkして)
それから、doいこうかと。
それから、doいこうかと。
613root▲▲ ★
2010/08/09(月) 23:29:03ID:???0 >>611
りょうかいです。アイハブ。
りょうかいです。アイハブ。
c-testは誰も「作業」していない伊予柑。
615root▲▲ ★
2010/08/09(月) 23:30:08ID:???0 bg30のdatキャッシュやsubject.txtキャッシュは、
現在SSD上ですかね。(そう見えます)
現在SSD上ですかね。(そう見えます)
>>612
よろしくですですm(_ _)m深謝
よろしくですですm(_ _)m深謝
618ちきちーた ★
2010/08/09(月) 23:31:41ID:???0619root▲▲ ★
2010/08/09(月) 23:32:08ID:???0 bg30ですが、test/ と test2/ を触っているのの2つあるのは、
どういうわけなんでしたっけか。
2xx 3xx 4xx 5xx URL
154 0 0 0*/test/p.so/kamome.2ch.net/mnewsplus/
93 0 0 0 /test/p.so/yuzuru.2ch.net/news4vip/
89 0 0 0 /test2/r.so/hayabusa.2ch.net/livecx/1281363983/l10
78 0 0 0 /test/p.so/kamome.2ch.net/newsplus/
43 0 0 0 /test/p.so/hayabusa.2ch.net/livecx/
32 0 0 0 /test2/r.so/hayabusa.2ch.net/liveanb/1281360390/l10
28 0 0 0 /test/p.so/kamome.2ch.net/news/
27 0 0 0 /test2/r.so/hayabusa.2ch.net/livecx/1281363983/470-479
24 0 0 0 /test/p.so/yuzuru.2ch.net/hsb/
23 0 0 0 /test/p.so/kamome.2ch.net/akb/
22 0 0 0 /test2/r.so/kamome.2ch.net/mnewsplus/1281353842/l10
21 0 0 0 /test2/r.so/hayabusa.2ch.net/liveanb/1281360390/757-766
どういうわけなんでしたっけか。
2xx 3xx 4xx 5xx URL
154 0 0 0*/test/p.so/kamome.2ch.net/mnewsplus/
93 0 0 0 /test/p.so/yuzuru.2ch.net/news4vip/
89 0 0 0 /test2/r.so/hayabusa.2ch.net/livecx/1281363983/l10
78 0 0 0 /test/p.so/kamome.2ch.net/newsplus/
43 0 0 0 /test/p.so/hayabusa.2ch.net/livecx/
32 0 0 0 /test2/r.so/hayabusa.2ch.net/liveanb/1281360390/l10
28 0 0 0 /test/p.so/kamome.2ch.net/news/
27 0 0 0 /test2/r.so/hayabusa.2ch.net/livecx/1281363983/470-479
24 0 0 0 /test/p.so/yuzuru.2ch.net/hsb/
23 0 0 0 /test/p.so/kamome.2ch.net/akb/
22 0 0 0 /test2/r.so/kamome.2ch.net/mnewsplus/1281353842/l10
21 0 0 0 /test2/r.so/hayabusa.2ch.net/liveanb/1281360390/757-766
620ちきちーた ★
2010/08/09(月) 23:32:17ID:???0 >>617
df でしたっけ?
df でしたっけ?
621256
2010/08/09(月) 23:32:47ID:ZSBmI7+h0 はい
622ちきちーた ★
2010/08/09(月) 23:33:36ID:???0623ちきちーた ★
2010/08/09(月) 23:34:47ID:???0 Filesystem 1K-blocks Used Avail Capacity Mounted on
/dev/md0 886686 414672 401080 51% /md
そのディレクトリだけってのはどうやるの?
/dev/md0 886686 414672 401080 51% /md
そのディレクトリだけってのはどうやるの?
du -h
かな。
かな。
625256
2010/08/09(月) 23:37:04ID:ZSBmI7+h0 du -c ディレクトリパス
かと。
かと。
627root▲▲ ★
2010/08/09(月) 23:37:40ID:???0628root▲▲ ★
2010/08/09(月) 23:37:55ID:???0 DF(1) FreeBSD General Commands Manual DF(1)
NAME
df -- display free disk space
SYNOPSIS
df [-b | -g | -H | -h | -k | -m | -P] [-acilnT] [-t type]
[file | filesystem ...]
NAME
df -- display free disk space
SYNOPSIS
df [-b | -g | -H | -h | -k | -m | -P] [-acilnT] [-t type]
[file | filesystem ...]
630root▲▲ ★
2010/08/09(月) 23:39:54ID:???0 c-test のスワップ増加の原因は、
一時的に何らかの理由で httpd が増えたせいですね。
しくって詰まったとか、なんかそんなので。
で、今も httpd が多い状態です。
%pgrep httpd | wc -l
1529
一時的に何らかの理由で httpd が増えたせいですね。
しくって詰まったとか、なんかそんなので。
で、今も httpd が多い状態です。
%pgrep httpd | wc -l
1529
631ちきちーた ★
2010/08/09(月) 23:41:02ID:???0 /md 配下のsubject.txtのキャッシュ du -s = 22,622
/home 配下の datのキャッシュ du -s = 9,779,066
単位はなんだべか? セクタ?
/home 配下の datのキャッシュ du -s = 9,779,066
単位はなんだべか? セクタ?
632root▲▲ ★
2010/08/09(月) 23:42:35ID:???0 今は動作的には落ち着いているようなので、
・もう少ししたら、c-test リブートします。
・で、様子確認します。
・swapが起こるようなら、httpdの数を減らす方向でチューニングします。
c-test の Apache status より:
CPU Usage: u32896.3 s5513.84 cu0 cs0 - 12.7% CPU load ← CPU余裕ある
102 requests/sec - 259.7 kB/second - 2611 B/request ← リクエストは処理できている
692 requests currently being processed, 848 idle workers ← idle workersが大杉状態(理由は上記)
・もう少ししたら、c-test リブートします。
・で、様子確認します。
・swapが起こるようなら、httpdの数を減らす方向でチューニングします。
c-test の Apache status より:
CPU Usage: u32896.3 s5513.84 cu0 cs0 - 12.7% CPU load ← CPU余裕ある
102 requests/sec - 259.7 kB/second - 2611 B/request ← リクエストは処理できている
692 requests currently being processed, 848 idle workers ← idle workersが大杉状態(理由は上記)
633256
2010/08/09(月) 23:43:19ID:ZSBmI7+h0 仕切り直し
du -sh . だと読みやすくなるみたい
du -sh . だと読みやすくなるみたい
634root▲▲ ★
2010/08/09(月) 23:44:12ID:???0 ふつうに1024bytes(Kbyte) < duの単位
635root▲▲ ★
2010/08/09(月) 23:44:56ID:???0636root▲▲ ★
2010/08/09(月) 23:45:22ID:???0 さて、それなりに観察したので、
一度 c-test リブート要請入れます。
一度 c-test リブート要請入れます。
637ちきちーた ★
2010/08/09(月) 23:45:34ID:???0 /md 配下のsubject.txtのキャッシュ du -s = 22M
/home 配下の datのキャッシュ du -sh = 9.5G
/home 配下の datのキャッシュ du -sh = 9.5G
639まみら ★
2010/08/09(月) 23:46:31ID:???P リブートしたら広告入れなきゃ
640root▲▲ ★
2010/08/09(月) 23:47:05ID:???0 >>636
依頼済。
依頼済。
2010/08/09(月) 23:49:33ID:cTFd2tD10
du -sh . とかで単位つき。
644root▲▲ ★
2010/08/09(月) 23:52:55ID:???0 リブート中。
645ちきちーた ★
2010/08/09(月) 23:53:54ID:???0 bg30 お暇中
last pid: 5267; load averages: 0.40, 1.84, 2.11 up 0+03:49:36 07:53:35
1082 processes:1 running, 1081 sleeping
CPU: 0.1% user, 0.0% nice, 0.1% system, 0.0% interrupt, 99.8% idle
Mem: 3676M Active, 2356M Inact, 1299M Wired, 163M Cache, 807M Buf, 220M Free
Swap: 8192M Total, 144K Used, 8192M Free
last pid: 5267; load averages: 0.40, 1.84, 2.11 up 0+03:49:36 07:53:35
1082 processes:1 running, 1081 sleeping
CPU: 0.1% user, 0.0% nice, 0.1% system, 0.0% interrupt, 99.8% idle
Mem: 3676M Active, 2356M Inact, 1299M Wired, 163M Cache, 807M Buf, 220M Free
Swap: 8192M Total, 144K Used, 8192M Free
646root▲▲ ★
2010/08/09(月) 23:55:57ID:???0 上がった。観察開始。
647root▲▲ ★
2010/08/09(月) 23:56:33ID:???0 _CC__C__CCC_CC_CCC___CC_CC_WCC__CCC__CCCC__C__CCCC_CC_CC_CC_CC_C
C___C_C__C____CCW____C__C_C__C__CC_C_CCC____C__C_____CC____C_C__
C_C_CCC_CC__C__C_C_CC_C___________C______C_C_C____C__C__CC___C__
__C_C_________CC__W___C_C_____C__C____CCCC_C_CWCC_C_CCCCCCCC_CCC
C______C__CC_CCC_C_CW_CC__C_WCCCCCCW_C_CCC__CCC_CC_CC___C_CCCCCC
___CCC__CW__CCCCCC___CC_C____CW__CCCCC__CCCC__C_CCCCCCCC_C_CCCC_
CCCCCCCC__CCCCC__CC_______CC_CCC_WCCC_CCCCCW_WC_CCCCCC_CC_CC_CCC
C_WCCC__C________C__C___C_C__C_WC__C__CC_C______________________
________________________________________________________________
__________________________________C_____________________________
________________________________________________________________
________________________________________________________________
________________________________________________________________
________________________________________________________________
________________________________________________________________
________________________________________________________________
_...............................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
C___C_C__C____CCW____C__C_C__C__CC_C_CCC____C__C_____CC____C_C__
C_C_CCC_CC__C__C_C_CC_C___________C______C_C_C____C__C__CC___C__
__C_C_________CC__W___C_C_____C__C____CCCC_C_CWCC_C_CCCCCCCC_CCC
C______C__CC_CCC_C_CW_CC__C_WCCCCCCW_C_CCC__CCC_CC_CC___C_CCCCCC
___CCC__CW__CCCCCC___CC_C____CW__CCCCC__CCCC__C_CCCCCCCC_C_CCCC_
CCCCCCCC__CCCCC__CC_______CC_CCC_WCCC_CCCCCW_WC_CCCCCC_CC_CC_CCC
C_WCCC__C________C__C___C_C__C_WC__C__CC_C______________________
________________________________________________________________
__________________________________C_____________________________
________________________________________________________________
________________________________________________________________
________________________________________________________________
________________________________________________________________
________________________________________________________________
________________________________________________________________
_...............................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
648root▲▲ ★
2010/08/09(月) 23:57:48ID:???0 今の時間でこれなら、
httpd は半分に減らしてもらったほうが、
何かあったときの安全策としてはよさげなかんじ。< c-test
PHP主体の場合、httpdは少な目にするのがよさげです。
アクセラレータ入れている場合は特に。
これはこれまでの経験的に明らかで。
httpd は半分に減らしてもらったほうが、
何かあったときの安全策としてはよさげなかんじ。< c-test
PHP主体の場合、httpdは少な目にするのがよさげです。
アクセラレータ入れている場合は特に。
これはこれまでの経験的に明らかで。
649root▲▲ ★
2010/08/09(月) 23:58:48ID:???0 上の行もコピペしたほうがいいかな。
353 requests currently being processed, 771 idle workers
CCCCCCCCCCCCC__CCCCCCC_C__C__C_CCCCCCCCCCW_CCCCCCCCCC_CCCWCCCC__
C___C_C__C____C_C____C__C_C__WCCCC_CCCCC__C_C________CC_C__C_C__
__C_CCCCCCC_C____C________C_C_C___C______C________C____CCC______
____CC________CC__C_____C_C___C_______CC_CCCC_CC__C___C_CCCCCCCC
C_CCC_CC_CCCCCC_C_____CCCWC_CWC__C_CCC_CC__C_CC_CCCCCCCCCCCC_CCC
CCCC_C___C_CC_CCCCCCCCC_____C_C___CCC__CCCC_CWCCCC_C_CCCCC_CCCC_
CCC_C__CC_WCCCCC_C_CC__CC_C__C__CCCCCCC_CC_CCCCCCC__CCCCC___C_C_
CCCC_C_CC_C_WC____CC_CCC__CCCCCC__CC__C__CCCC__CW___C___CCCCCC__
C_______________________________________________________________
_________C________________________C________C____________________
_____________________________________________________C__________
________________________________________________________________
_C_______________________________________C______________________
________________________________________________________________
______________________C_________________________________________
________________________________________________________________
__C_C_CCCCCCCC__CCCCCC_C_C_CCC__CC_CCCC_CCCCCCC_CC_CC_C_CWC_CC_C
C__CCC__CCC___C___C__________C_____C............................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
353 requests currently being processed, 771 idle workers
CCCCCCCCCCCCC__CCCCCCC_C__C__C_CCCCCCCCCCW_CCCCCCCCCC_CCCWCCCC__
C___C_C__C____C_C____C__C_C__WCCCC_CCCCC__C_C________CC_C__C_C__
__C_CCCCCCC_C____C________C_C_C___C______C________C____CCC______
____CC________CC__C_____C_C___C_______CC_CCCC_CC__C___C_CCCCCCCC
C_CCC_CC_CCCCCC_C_____CCCWC_CWC__C_CCC_CC__C_CC_CCCCCCCCCCCC_CCC
CCCC_C___C_CC_CCCCCCCCC_____C_C___CCC__CCCC_CWCCCC_C_CCCCC_CCCC_
CCC_C__CC_WCCCCC_C_CC__CC_C__C__CCCCCCC_CC_CCCCCCC__CCCCC___C_C_
CCCC_C_CC_C_WC____CC_CCC__CCCCCC__CC__C__CCCC__CW___C___CCCCCC__
C_______________________________________________________________
_________C________________________C________C____________________
_____________________________________________________C__________
________________________________________________________________
_C_______________________________________C______________________
________________________________________________________________
______________________C_________________________________________
________________________________________________________________
__C_C_CCCCCCCC__CCCCCC_C_C_CCC__CC_CCCC_CCCCCCC_CC_CC_C_CWC_CC_C
C__CCC__CCC___C___C__________C_____C............................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
................................................................
c-test スキーリ♪
last pid: 2655; load averages: 2.35, 1.51, 0.71 up 0+00:04:56 07:58:17
1186 processes:2 running, 1184 sleeping
CPU: 25.7% user, 0.0% nice, 5.3% system, 1.9% interrupt, 67.0% idle
Mem: 2016M Active, 237M Inact, 1337M Wired, 20K Cache, 1019M Buf, 8299M Free
Swap: 24G Total, 24G Free
$ vmstat 1 5
procs memory page disks faults cpu
r b w avm fre flt re pi po fr sr ad0 ad1 in sy cs us sy id
2 0 0 8919M 8161M 2981 1 1 0 590 0 0 0 7735 92861 37253 14 4 82
2 0 0 8919M 8161M 929 0 0 0 0 0 0 0 12103 165931 60384 25 6 69
4 0 0 8919M 8159M 1080 0 0 0 144 0 0 7 12252 164902 61339 28 5 66
2 0 0 8919M 8157M 1166 0 0 0 0 0 0 1 12361 168351 61644 27 7 66
3 0 0 8919M 8157M 522 0 0 0 0 0 0 1 12330 170775 62340 27 8 65
last pid: 2655; load averages: 2.35, 1.51, 0.71 up 0+00:04:56 07:58:17
1186 processes:2 running, 1184 sleeping
CPU: 25.7% user, 0.0% nice, 5.3% system, 1.9% interrupt, 67.0% idle
Mem: 2016M Active, 237M Inact, 1337M Wired, 20K Cache, 1019M Buf, 8299M Free
Swap: 24G Total, 24G Free
$ vmstat 1 5
procs memory page disks faults cpu
r b w avm fre flt re pi po fr sr ad0 ad1 in sy cs us sy id
2 0 0 8919M 8161M 2981 1 1 0 590 0 0 0 7735 92861 37253 14 4 82
2 0 0 8919M 8161M 929 0 0 0 0 0 0 0 12103 165931 60384 25 6 69
4 0 0 8919M 8159M 1080 0 0 0 144 0 0 7 12252 164902 61339 28 5 66
2 0 0 8919M 8157M 1166 0 0 0 0 0 0 1 12361 168351 61644 27 7 66
3 0 0 8919M 8157M 522 0 0 0 0 0 0 1 12330 170775 62340 27 8 65
651root▲▲ ★
2010/08/10(火) 00:00:15ID:???0 Cが多いので、概ねいけているかんじかな。
しかしかなり久しぶりに携帯系サーバのApache statusみるけど、
最近の携帯って見違えるほど、はけがよくなっているような。
もちろんサーバがいいのもある気がするけど。
しかしかなり久しぶりに携帯系サーバのApache statusみるけど、
最近の携帯って見違えるほど、はけがよくなっているような。
もちろんサーバがいいのもある気がするけど。
>>643
あらま、エラーが出るのね。。。
あらま、エラーが出るのね。。。
各キャリアの中継サーバ?の性能も良くなったのもあるかもですね。
654root▲▲ ★
2010/08/10(火) 00:02:24ID:???0 中の人から、httpd.conf のチューニングを今なら承ってもらえる、
という旨の返事をいただきました。
もう少し(5分ぐらいかな)様子見て、適切そうな値を投入してみるです。
という旨の返事をいただきました。
もう少し(5分ぐらいかな)様子見て、適切そうな値を投入してみるです。
655ちきちーた ★
2010/08/10(火) 00:02:29ID:???0 まぁ そのc-testにBGの機能も入れちまおうって目論みですからねぇ
RAMは余ってた方が嬉しいな、/md は使わない予定だからそれもPHPが使う分だけに減らせますね、
ところでPHPは/mdを広告用に使っている? これも何らかの方法でなくしたいなぁ
PHPも同居のBGもopen/closeは全廃したいです。
どんな方法があるか知らないけど、
RAMは余ってた方が嬉しいな、/md は使わない予定だからそれもPHPが使う分だけに減らせますね、
ところでPHPは/mdを広告用に使っている? これも何らかの方法でなくしたいなぁ
PHPも同居のBGもopen/closeは全廃したいです。
どんな方法があるか知らないけど、
656root▲▲ ★
2010/08/10(火) 00:03:09ID:???0 今のcの使い心地はどんなかんじでしょう。
657ちきちーた ★
2010/08/10(火) 00:03:43ID:???0 超さくさく >>656
658root▲▲ ★
2010/08/10(火) 00:04:30ID:???0 bg30 ちょとだけswapしちゃった?
660ちきちーた ★
2010/08/10(火) 00:06:09ID:???0 bg30
last pid: 5354; load averages: 1.38, 1.33, 1.54 up 0+04:01:58 08:05:57
1084 processes:4 running, 1080 sleeping
CPU: 12.8% user, 0.0% nice, 20.4% system, 0.6% interrupt, 66.2% idle
Mem: 3823M Active, 2296M Inact, 1301M Wired, 157M Cache, 807M Buf, 136M Free
Swap: 8192M Total, 152K Used, 8192M Free
last pid: 5354; load averages: 1.38, 1.33, 1.54 up 0+04:01:58 08:05:57
1084 processes:4 running, 1080 sleeping
CPU: 12.8% user, 0.0% nice, 20.4% system, 0.6% interrupt, 66.2% idle
Mem: 3823M Active, 2296M Inact, 1301M Wired, 157M Cache, 807M Buf, 136M Free
Swap: 8192M Total, 152K Used, 8192M Free
661ちきちーた ★
2010/08/10(火) 00:06:45ID:???0 見てなかったけど、形跡はない気がするが、
662まみら ★
2010/08/10(火) 00:07:15ID:???P また頭の痛い事を、、、w>広告
c-test じわじわーっと亜希が減っていきますねぇ。。。
phpのメモリーリークかしら?@考えすぎ?(5.2.14で対応したとかなんとか)
last pid: 2856; load averages: 3.26, 3.12, 2.05 up 0+00:14:29 08:07:50
1318 processes:4 running, 1314 sleeping
CPU: 37.4% user, 0.0% nice, 7.4% system, 2.7% interrupt, 52.5% idle
Mem: 2577M Active, 1110M Inact, 1616M Wired, 1236M Buf, 6587M Free
Swap: 24G Total, 24G Free
phpのメモリーリークかしら?@考えすぎ?(5.2.14で対応したとかなんとか)
last pid: 2856; load averages: 3.26, 3.12, 2.05 up 0+00:14:29 08:07:50
1318 processes:4 running, 1314 sleeping
CPU: 37.4% user, 0.0% nice, 7.4% system, 2.7% interrupt, 52.5% idle
Mem: 2577M Active, 1110M Inact, 1616M Wired, 1236M Buf, 6587M Free
Swap: 24G Total, 24G Free
665root▲▲ ★
2010/08/10(火) 00:09:03ID:???0 >>657
私も少し使ってみてますが、
いいかんじっぽいですね。
453 requests currently being processed, 793 idle workers
だいたいこんなかんじか。
それなりにhttpdの数は必要なのね。
だったら、「やばくなったら増やす」の部分、つまりマージンの部分を
少なくするのがいいかな。
つまり、Apache status でいう . のところを減らして、
不用意なトラブルがあっても、httpd が異常に増殖しないようにする。
そうすれば、swap 食ってしまうことはなくなるはず。
bbs.cgi の時と違って処理するのが外部プログラムではなく、
httpd 本体に組み込まれた PHP なので、
うかつにすると、swap を使ってしまいやすい、というのもあるかな。
つまり、httpd プロセス全体のうち、メモリに常駐する部分が多くなるという。
私も少し使ってみてますが、
いいかんじっぽいですね。
453 requests currently being processed, 793 idle workers
だいたいこんなかんじか。
それなりにhttpdの数は必要なのね。
だったら、「やばくなったら増やす」の部分、つまりマージンの部分を
少なくするのがいいかな。
つまり、Apache status でいう . のところを減らして、
不用意なトラブルがあっても、httpd が異常に増殖しないようにする。
そうすれば、swap 食ってしまうことはなくなるはず。
bbs.cgi の時と違って処理するのが外部プログラムではなく、
httpd 本体に組み込まれた PHP なので、
うかつにすると、swap を使ってしまいやすい、というのもあるかな。
つまり、httpd プロセス全体のうち、メモリに常駐する部分が多くなるという。
667root▲▲ ★
2010/08/10(火) 00:09:35ID:???0668root▲▲ ★
2010/08/10(火) 00:10:27ID:???0 で、ひとつひとつ依頼していこうと。
問題を複雑化したくないので。
まずは、httpd の数を考えるです。
今の設定は、、、。
問題を複雑化したくないので。
まずは、httpd の数を考えるです。
今の設定は、、、。
669まみら ★
2010/08/10(火) 00:10:38ID:???P 不用意なトラブル多くてすみません!
671root▲▲ ★
2010/08/10(火) 00:11:58ID:???0 Apache status の状況からして、
kamome と同じか。
とするとこれかな。
最初にhttpdを1024個起動し、
アイドル状態のhttpdが常に704(703+1)個以上になるように起動数を変化させ、
非常時には待機数を2048個まで増やす設定
StartServers 1024
MinSpareServers 703
MaxSpareServers 1024
ServerLimit 2048
MaxClients 2048
MaxRequestsPerChild 10000
MaxMemFree 2000
これを、、、。
> 非常時には待機数を2048個まで増やす設定
をやめる方向だから、
(続く)
kamome と同じか。
とするとこれかな。
最初にhttpdを1024個起動し、
アイドル状態のhttpdが常に704(703+1)個以上になるように起動数を変化させ、
非常時には待機数を2048個まで増やす設定
StartServers 1024
MinSpareServers 703
MaxSpareServers 1024
ServerLimit 2048
MaxClients 2048
MaxRequestsPerChild 10000
MaxMemFree 2000
これを、、、。
> 非常時には待機数を2048個まで増やす設定
をやめる方向だから、
(続く)
672ちきちーた ★
2010/08/10(火) 00:13:29ID:???0673root▲▲ ★
2010/08/10(火) 00:13:37ID:???0 で、このマージンはもともと「どーーーん」の時に、
bbs.cgi (speedycgi) がどっさり、
そして、dat 読むひとどっさり、というためのものだから、
その部分は BG さん(同居したとしても別の人)がやるということで、
このマージンは減らせると。
あとは、キャッシュ(つまりBG)が、そのへんはうまく吸収するはずと。
bbs.cgi (speedycgi) がどっさり、
そして、dat 読むひとどっさり、というためのものだから、
その部分は BG さん(同居したとしても別の人)がやるということで、
このマージンは減らせると。
あとは、キャッシュ(つまりBG)が、そのへんはうまく吸収するはずと。
674root▲▲ ★
2010/08/10(火) 00:14:55ID:???0 bgのほうも、Apache status みました。
一時的に c からどっさり来たことがあったようですね。
httpd が増えた形跡がある。
たぶんその時に、swap もちょっぴり使ったんではないかなと。
一時的に c からどっさり来たことがあったようですね。
httpd が増えた形跡がある。
たぶんその時に、swap もちょっぴり使ったんではないかなと。
675ちきちーた ★
2010/08/10(火) 00:16:20ID:???0 お酒もちょっぴり・・・ ですね、
ちょっぴり残してあとは飲み乾すのですね!(・∀・)
♯どうも最近、酒類耐性が弱くなりつつある。。。
♯どうも最近、酒類耐性が弱くなりつつある。。。
677root▲▲ ★
2010/08/10(火) 00:22:44ID:???0 安全を見てこうかな。
マージンなしでもいいかも。(ServerLimit と MaxClients の 1280 → 1024)
・キープするアイドルワーカーの数 704 → 352 (1/2)
・非常時のマージン 1024 → 256 (1/4)
最初にhttpdを1024個起動し、
アイドル状態のhttpdが常に352(351+1)個以上になるように起動数を変化させ、
非常時には待機数を1280個まで増やす設定
StartServers 1024
MinSpareServers 351
MaxSpareServers 1024
ServerLimit 1280
MaxClients 1280
MaxRequestsPerChild 10000
MaxMemFree 2000
マージンなしでもいいかも。(ServerLimit と MaxClients の 1280 → 1024)
・キープするアイドルワーカーの数 704 → 352 (1/2)
・非常時のマージン 1024 → 256 (1/4)
最初にhttpdを1024個起動し、
アイドル状態のhttpdが常に352(351+1)個以上になるように起動数を変化させ、
非常時には待機数を1280個まで増やす設定
StartServers 1024
MinSpareServers 351
MaxSpareServers 1024
ServerLimit 1280
MaxClients 1280
MaxRequestsPerChild 10000
MaxMemFree 2000
678root▲▲ ★
2010/08/10(火) 00:25:33ID:???0 >>677 で依頼いきます。
よどしくですー
680root▲▲ ★
2010/08/10(火) 00:29:11ID:???0 依頼しました。>>677
681root▲▲ ★
2010/08/10(火) 00:31:25ID:???0 httpd 再起動入った様子。
ガンガン来ているので、LA が一時的に急上昇しますが、
しばらくすれば落ち着くはず。
ガンガン来ているので、LA が一時的に急上昇しますが、
しばらくすれば落ち着くはず。
682root▲▲ ★
2010/08/10(火) 00:32:37ID:???0 バランスがよくなった気がします。< c-test
421 requests currently being processed, 698 idle workers
C__CCC_CCCCC_CC_CCCW_CCCCCCCCCCCC___CC_CCCCCCC_C_CCCWCCCCCWCC_C_
_C_C_CCCCCCCCCCCCCCCCCCCC_C_C_WCCCCCC_CCCCCCCC__CCC__CCCCCCC___C
__CC__CCC_C__CC_CCCCCC_____CCCC_CC___C___C_C__CC__C_C__CCCC_CC__
CW_CCCCCCCCCCCC_C_CCCCCCCCC_CCC____C_CCC_CCCC___CWWCC_C___CCC_C_
C____CC___C__CCCCC_W__CCC_CCC_C_CC_C_CCC_CC_C_CCCCCCC_C_CCC_C_WC
C_CC_CC_CC_CC_C_CCCCCCC___CCC__C__CCCCC_CCC_C__CCCCCC__C_C_CCWCC
__CC__C_CC_CCCCCC_C_CCC_CC_CCC_C_CC_C__C__CCCCCC_CCC__C___C___CC
__CC___CC_CC_CWCCC__CC__CC_C_C___CC_CCC_CCC__CCC___C__CC__C_CC__
_CCWCCC_____C_CC_C_C___CCCCC__C_CC____CCCCCCC_CC____C_C_CCCC____
_CWW______CC_____CC_____C_C_____C___CC__CC__C___CCCCCC_____C_C__
_CC__C___CC__C_____________C_______CC____C_______C__C__________C
__C__C___C____________________C___C________C__C__C___C___C______
_______C_____________C________C_________C_____C_________________
C__________________C_____________C______________________________
________________________________________________________________
________________________________________________________________
________________________________________________________________
_______________________________.................................
................................................................
................................................................
421 requests currently being processed, 698 idle workers
C__CCC_CCCCC_CC_CCCW_CCCCCCCCCCCC___CC_CCCCCCC_C_CCCWCCCCCWCC_C_
_C_C_CCCCCCCCCCCCCCCCCCCC_C_C_WCCCCCC_CCCCCCCC__CCC__CCCCCCC___C
__CC__CCC_C__CC_CCCCCC_____CCCC_CC___C___C_C__CC__C_C__CCCC_CC__
CW_CCCCCCCCCCCC_C_CCCCCCCCC_CCC____C_CCC_CCCC___CWWCC_C___CCC_C_
C____CC___C__CCCCC_W__CCC_CCC_C_CC_C_CCC_CC_C_CCCCCCC_C_CCC_C_WC
C_CC_CC_CC_CC_C_CCCCCCC___CCC__C__CCCCC_CCC_C__CCCCCC__C_C_CCWCC
__CC__C_CC_CCCCCC_C_CCC_CC_CCC_C_CC_C__C__CCCCCC_CCC__C___C___CC
__CC___CC_CC_CWCCC__CC__CC_C_C___CC_CCC_CCC__CCC___C__CC__C_CC__
_CCWCCC_____C_CC_C_C___CCCCC__C_CC____CCCCCCC_CC____C_C_CCCC____
_CWW______CC_____CC_____C_C_____C___CC__CC__C___CCCCCC_____C_C__
_CC__C___CC__C_____________C_______CC____C_______C__C__________C
__C__C___C____________________C___C________C__C__C___C___C______
_______C_____________C________C_________C_____C_________________
C__________________C_____________C______________________________
________________________________________________________________
________________________________________________________________
________________________________________________________________
_______________________________.................................
................................................................
................................................................
683root▲▲ ★
2010/08/10(火) 00:34:00ID:???0 もうこれからは負荷が増える時間ではない気がするので、
(深夜番組の実況とかあるかもしれないけど)
あとはこの状態で、観察すればよさげな予感。
curlは、えっと。
ちょっと私のほうでも調べてみるです。
(深夜番組の実況とかあるかもしれないけど)
あとはこの状態で、観察すればよさげな予感。
curlは、えっと。
ちょっと私のほうでも調べてみるです。
684root▲▲ ★
2010/08/10(火) 00:37:28ID:???0 bg の apachetop -T 10
それっぽいかんじです。
livecx でなんか番組やってるのかな。
芸スポが多いのも携帯ならではです。
ms slotj slotk wcomic あたりも昔から。
akb も多いのね。昔の morningcoffee みたいなところにいる?
2xx 3xx 4xx 5xx URL
112 0 0 0*/test/p.so/kamome.2ch.net/mnewsplus/
68 0 0 0 /test/p.so/kamome.2ch.net/newsplus/
57 0 0 0 /test/p.so/yuzuru.2ch.net/news4vip/
33 0 0 0 /test2/r.so/kamome.2ch.net/mnewsplus/1281353842/l10
25 0 0 0 /test2/r.so/hayabusa.2ch.net/livecx/1281364787/l10
23 0 0 0 /test2/r.so/kamome.2ch.net/newsplus/1281364454/l10
22 0 0 0 /test/p.so/kamome.2ch.net/news/
20 0 0 0 /test/p.so/toki.2ch.net/ms/
18 0 0 0 /test2/r.so/yuzuru.2ch.net/news4vip/1281364033/l10
18 0 0 0 /test/p.so/yuzuru.2ch.net/hsb/
16 0 0 0 /test2/r.so/hayabusa.2ch.net/livecx/1281366850/l10
15 0 0 0 /test/p.so/kamome.2ch.net/akb/
14 0 0 0 /test/p.so/yuzuru.2ch.net/wcomic/
14 0 0 0 /test/p.so/yuzuru.2ch.net/slotj/
12 0 0 0 /test/p.so/yuzuru.2ch.net/slotk/
12 0 0 0 /test2/r.so/kamome.2ch.net/newsplus/1281364454/1-1
12 0 0 0 /test2/r.so/yuzuru.2ch.net/news4vip/1281366100/l10
12 0 0 0 /test2/r.so/hayabusa.2ch.net/livecx/1281364787/718-727
12 0 0 0 /test2/r.so/kamome.2ch.net/mnewsplus/1281361762/1-1
12 0 0 0 /test/p.so/hayabusa.2ch.net/livecx/
11 0 0 0 /test/p.so/yuzuru.2ch.net/pachik/
11 0 0 0 /test/p.so/yuzuru.2ch.net/base/
11 0 0 0 /test/p.so/yuzuru.2ch.net/pachij/
11 0 0 0 /test2/r.so/kamome.2ch.net/mnewsplus/1281324230/l10
それっぽいかんじです。
livecx でなんか番組やってるのかな。
芸スポが多いのも携帯ならではです。
ms slotj slotk wcomic あたりも昔から。
akb も多いのね。昔の morningcoffee みたいなところにいる?
2xx 3xx 4xx 5xx URL
112 0 0 0*/test/p.so/kamome.2ch.net/mnewsplus/
68 0 0 0 /test/p.so/kamome.2ch.net/newsplus/
57 0 0 0 /test/p.so/yuzuru.2ch.net/news4vip/
33 0 0 0 /test2/r.so/kamome.2ch.net/mnewsplus/1281353842/l10
25 0 0 0 /test2/r.so/hayabusa.2ch.net/livecx/1281364787/l10
23 0 0 0 /test2/r.so/kamome.2ch.net/newsplus/1281364454/l10
22 0 0 0 /test/p.so/kamome.2ch.net/news/
20 0 0 0 /test/p.so/toki.2ch.net/ms/
18 0 0 0 /test2/r.so/yuzuru.2ch.net/news4vip/1281364033/l10
18 0 0 0 /test/p.so/yuzuru.2ch.net/hsb/
16 0 0 0 /test2/r.so/hayabusa.2ch.net/livecx/1281366850/l10
15 0 0 0 /test/p.so/kamome.2ch.net/akb/
14 0 0 0 /test/p.so/yuzuru.2ch.net/wcomic/
14 0 0 0 /test/p.so/yuzuru.2ch.net/slotj/
12 0 0 0 /test/p.so/yuzuru.2ch.net/slotk/
12 0 0 0 /test2/r.so/kamome.2ch.net/newsplus/1281364454/1-1
12 0 0 0 /test2/r.so/yuzuru.2ch.net/news4vip/1281366100/l10
12 0 0 0 /test2/r.so/hayabusa.2ch.net/livecx/1281364787/718-727
12 0 0 0 /test2/r.so/kamome.2ch.net/mnewsplus/1281361762/1-1
12 0 0 0 /test/p.so/hayabusa.2ch.net/livecx/
11 0 0 0 /test/p.so/yuzuru.2ch.net/pachik/
11 0 0 0 /test/p.so/yuzuru.2ch.net/base/
11 0 0 0 /test/p.so/yuzuru.2ch.net/pachij/
11 0 0 0 /test2/r.so/kamome.2ch.net/mnewsplus/1281324230/l10
685root▲▲ ★
2010/08/10(火) 00:44:54ID:???0 curl モジュールの件
この間たんたんと作った w2.p2.2ch.net には、
昔の p2 時代の依頼により curl を入れましたが、
/usr/local/etc/php.ini の、
;extension=php_curl.dll
は、コメントのままです。
というかこれは、そもそも、
; Windows Extensions ← これ
; Note that ODBC support is built in, so no dll is needed for it.
; Note that many DLL files are located in the extensions/ (PHP 4) ext/ (PHP 5)
; extension folders as well as the separate PECL DLL download (PHP 5).
; Be sure to appropriately set the extension_dir directive.
;extension=php_mbstring.dll
;extension=php_bz2.dll
;extension=php_curl.dll
(以下略)
なのではないかと。
この間たんたんと作った w2.p2.2ch.net には、
昔の p2 時代の依頼により curl を入れましたが、
/usr/local/etc/php.ini の、
;extension=php_curl.dll
は、コメントのままです。
というかこれは、そもそも、
; Windows Extensions ← これ
; Note that ODBC support is built in, so no dll is needed for it.
; Note that many DLL files are located in the extensions/ (PHP 4) ext/ (PHP 5)
; extension folders as well as the separate PECL DLL download (PHP 5).
; Be sure to appropriately set the extension_dir directive.
;extension=php_mbstring.dll
;extension=php_bz2.dll
;extension=php_curl.dll
(以下略)
なのではないかと。
あらら、、、(汗)
687ちきちーた ★
2010/08/10(火) 00:48:42ID:???0 つまりもともと同胞されていてとくに何もする必要はないと、
689まみら ★
2010/08/10(火) 00:53:55ID:???P じゃあ、どこだろ。
c201-203にはマァヴさんに入れてもらいました><。
c201-203にはマァヴさんに入れてもらいました><。
690root▲▲ ★
2010/08/10(火) 00:54:30ID:???0 で、ぱっと見、extension module が入っているべき場所には、
%ls
apc.so eaccelerator.so
この2つしか、
後付けの拡張モジュールがインストールされていない状態の模様。
かつ、今 phpinfo(); してみた限り、
curl がプリインストールされている形跡は、なかったです。
ということで、
↓
単にコメントを外す、とかでは使えるようにはならなくて、
eaccelerator をインストールしたのと同様の手順を踏んで、
curl モジュールのインストールを、改めてお願いしなければいけない予感です。
%ls
apc.so eaccelerator.so
この2つしか、
後付けの拡張モジュールがインストールされていない状態の模様。
かつ、今 phpinfo(); してみた限り、
curl がプリインストールされている形跡は、なかったです。
ということで、
↓
単にコメントを外す、とかでは使えるようにはならなくて、
eaccelerator をインストールしたのと同様の手順を踏んで、
curl モジュールのインストールを、改めてお願いしなければいけない予感です。
691root▲▲ ★
2010/08/10(火) 00:55:26ID:???0692root▲▲ ★
2010/08/10(火) 00:58:36ID:???0 c201 には、curl 入ってますね。
phpinfo(); すると出力されます。
curl
cURL support enabled
cURL Information libcurl/7.19.6 OpenSSL/0.9.8e zlib/1.2.3
phpinfo(); すると出力されます。
curl
cURL support enabled
cURL Information libcurl/7.19.6 OpenSSL/0.9.8e zlib/1.2.3
2010/08/10(火) 00:59:15ID:sbFSudcc0
まみら ★ さんかわゆす。
694root▲▲ ★
2010/08/10(火) 00:59:32ID:???0695root▲▲ ★
2010/08/10(火) 01:00:50ID:???0 で、私はそろそろ、負け組に向かう予感。
明日は6時起きで仕事だったりして。
いつもより1時間早いだけですが。
明日は6時起きで仕事だったりして。
いつもより1時間早いだけですが。
696ちきちーた ★
2010/08/10(火) 01:00:51ID:???0 ちょっと見ていない間に、またスワップあったようで、
bg30
last pid: 5711; load averages: 9.58, 3.96, 2.75 up 0+04:56:08 09:00:07
1083 processes:1 running, 1082 sleeping
CPU: 12.7% user, 0.0% nice, 18.6% system, 1.1% interrupt, 67.5% idle
Mem: 4432M Active, 1577M Inact, 1294M Wired, 273M Cache, 807M Buf, 137M Free
Swap: 8192M Total, 336K Used, 8192M Free
bg30
last pid: 5711; load averages: 9.58, 3.96, 2.75 up 0+04:56:08 09:00:07
1083 processes:1 running, 1082 sleeping
CPU: 12.7% user, 0.0% nice, 18.6% system, 1.1% interrupt, 67.5% idle
Mem: 4432M Active, 1577M Inact, 1294M Wired, 273M Cache, 807M Buf, 137M Free
Swap: 8192M Total, 336K Used, 8192M Free
■ このスレッドは過去ログ倉庫に格納されています
ニュース
- 動画配信中の刺殺事件、被害女性への批判に元埼玉県警刑事「違います」★4 [おっさん友の会★]
- 動画配信中の刺殺事件、被害女性への批判に元埼玉県警刑事「違います」★5 [おっさん友の会★]
- 都内で引っ越し難民が急増「2万円多く払っても部屋がグレードダウン」と家賃高騰に悲鳴…「貧乏人は狭い部屋か古い部屋に住めってか?」 [ぐれ★]
- 日本の自動車貿易、改めて批判 トランプ氏「米国製受け入れない」 ★3 [蚤の市★]
- 【貿易】「日本は700%の関税課している」ホワイトハウス報道官が日本のコメ関税を批判 撤廃ならカルローズ米5kgが1295円に [牛乳トースト★]
- 「男は黙れ」「男が産めるのは…だけ」新宿フェミ集会波紋、社民・福島氏参加も事務所は取材拒否、共産・吉良佳子氏も回答無し [おっさん友の会★]
- 最上あい、口座には800円しかない。大金はどこ行ったんや?誰かの口座に隠してるはず。つーことは共犯者がいる [882679842]
- 「万博リングの上にたくさん人が乗ったら危険過ぎる。 せや! 5600万円掛けて人を数えるセンサーを設置して人数制限するぞ!」 [485983549]
- 👹おじゃる丸絶賛実況スレ🏡
- ホロライブ3期生大集合中のお🏡
- 警察「テロリストは普通『アベー!』とか叫んで襲ってくる」 [377482965]
- (ヽ°ん゚)「250万円返せよ!」👈わかる (ヽ´ん`)「殺すか──」👈なんで? [784979476]