【野鳥の会】 BBS.2ch.net 全発言統計の巻 part1

**FOX ★** · 04/05/03 04:30

２ちゃんねるの全発言の統計を取ろうに挑戦

bbs.cgi に一個DNS問い合わせの処理を追加
発言バイト数.スレッドkey.板.サーバ.CGI名.BBS.2ch.net をlook up
この方法でやるとかなり低コストで出来る予感。

まずは現在空いている oyster138(旧game5)ではじめてみよう計画

**動け動けウゴウゴ２ちゃんねる** · 04/09/26 20:19:23

そういえばeroliveがLIVEではなく
その他の扱いになってましたよ＞つばめ

**▲ 某ソレ511** · 04/09/27 16:10:23

20040926　1838559
http://stats.2ch.net/kawasemi-d/2ch.txt

ひそかに昨日はバッケンレコード更新

**FOX ★** · 04/09/27 16:13:50

うげっ　　200 っすか、、、
何かありましたっけ? 要因

**FOX ★** · 04/09/27 16:15:20

って　勘違い
2004/09/26 だた

**▲ 某ソレ511** · 04/09/27 16:27:28

まぁ、昨日はマラソン女子日本新にK-1曙祭り、大相撲千秋楽、と
スポーツイベントには事欠かなかったわけですが、、関連する板のレス数は
まぁそれなりに（予想の範囲内で）伸びてるかなー、という感じでしかないですねぇ。

全体的に多かっただけ、な悪寒。

**動け動けウゴウゴ２ちゃんねる** · 04/09/27 20:04:47

>>355さんの意見は採用されないんでしょうか？
http://ruitomo.com/~gulab/speed.html
みたいなのだとわかりやすいです。
それと、このruitomoのレス数統計は、
2ch関係者が運用してるんでしょうか？
連絡先を知ってる方いましらどなたか教えてください。
なぜか一部データがおかしかったりするので。
ここにも書きましたが↓
http://qb5.2ch.net/test/read.cgi/operate/1095697632/587
（ただし今時点では、003 93641.56 厨房！(tmp4.2ch)等が実際より多いです。）

**動け動けウゴウゴ２ちゃんねる** · 04/09/27 20:28:58

>>775
１つ上のディレクトリに移動してちょっと探せば
連絡先（メールアドレス）は載ってるようですけど

**動け動けウゴウゴ２ちゃんねる** · 04/09/27 22:36:03

>>774
あとTGSぐらいかね

**775** · 04/09/27 23:36:15

>>776
ありがとうございます。それらしいものを見つけたので
連絡してみようと思います。

それと、やっぱりすずめやとんびの板名を
entrance→ラウンジ　などに変更してほしい。
FOXさん（でいいのかな？）おねがいします。

**動け動けウゴウゴ２ちゃんねる** · 04/09/28 23:10:42

併記が一番わかりやすい

**動け動けウゴウゴ２ちゃんねる** · 04/10/06 16:19:53

3日も180万いってますね。記録更新ではないけど。

**FOX ★** · 04/10/12 02:05:29

現在の BBS の呼び出し方　@bbs.cgi

$NOWTIME.$$.$BYTES.$FORM{'key'}.$FORM{'bbs'}.$ENV{'SERVER_NAME'}.bbs.bbs.2ch.net

**FOX ★** · 04/10/12 02:09:10

まずここにIPを載せることが許されるか否か、
許されないなら終了な訳だが、

**動け動けウゴウゴ２ちゃんねる** · 04/10/12 02:11:26

>>782
掲載することに異義ありません・・・

**動け動けウゴウゴ２ちゃんねる** · 04/10/12 02:19:49

ふむふむ。2chのポリシー的にどうか、と。
……どうなんでしょう？

**動け動けウゴウゴ２ちゃんねる** · 04/10/12 02:20:55

>>782
それって閲覧者や書込者のIP統計をsuzumeやkarasuみたいな感じで公開するってことですか？
だとしたら抵抗あるな。

**動け動けウゴウゴ２ちゃんねる** · 04/10/12 02:26:26

IP晒されてウッキーにいちいちなっていたら
削除３板には書き込めないわけで。。
なんかイヤーンって”感情”はあると思うけど。

公開するとしても関係者版とかにするのか一般公開にするのかもあるのかなーと。

**FOX ★** · 04/10/12 02:27:18

公開?
意図的にする予定はないけど?

**動け動けウゴウゴ２ちゃんねる** · 04/10/12 02:33:46

見られる人だけ見られるようにしとけば無問題かと

見られる人 = 機械のようにイモを掘り続ける事の出来る人 or 機械

**動け動けウゴウゴ２ちゃんねる** · 04/10/12 02:37:09

特に問題なさそうな気はする。

**動け動けウゴウゴ２ちゃんねる** · 04/10/12 04:30:46

ダメですよ。

**動け動けウゴウゴ２ちゃんねる** · 04/10/12 04:49:24

>>788
IP Address が作業者にも見られるのが問題ありとするなら、
表示時に適当に暗号化して、ID化するのもいいかと。

**FOX ★** · 04/10/12 09:27:34

表示しないってば、
DNSくえりぃに載せる是非
まったく

**動け動けウゴウゴ２ちゃんねる** · 04/10/12 09:52:29

すまんこってす。。

**▲:/usr/local/bin/ch2 -o i686** ◆P8fXJj6wwo · 04/10/12 10:18:46

>>792
すぐに解読できないように16進数クエリってのはどうでせう。
たとえば255.255.255.0ならばFF.FF.FF.00

あまり忌みなさそうですが

**root▲ ★** · 04/10/12 13:03:50

DNS queryに乗せることが、どういう意味を持つかってことですね。
もしそれが何らかのリスクを持っているなら、だめってことかと。
(例えば、外の人がIPアドレスを含んだDNS queryを覗くことができるリスクが生じるとか)

さて、

**▲:/usr/local/bin/ch2 -o i686** ◆P8fXJj6wwo · 04/10/12 13:51:04

かといって暗号化するとなると共通式でかまわないとは思われだけど
そのエンコードとデコードを相当軽いやつにしないといけないですしね・・・

さて、

**root▲ ★** · 04/10/12 13:57:54

暗号化はパフォーマンスの点からいまいちだなぁ。

>>795 の意味をよく考えてみることが大事かなと。
さて、↓

**外野ｧｧﾝ** · 04/10/12 15:25:00

は南京玉簾～♪

**動け動けウゴウゴ２ちゃんねる** · 04/10/12 15:54:58

よくわからんが、誘導されたのでURI貼っておく。
http://pc5.2ch.net/test/read.cgi/software/1096811550/561
http://pc5.2ch.net/test/read.cgi/software/1096811550/563
http://pc5.2ch.net/test/read.cgi/software/1096811550/566

**動け動けウゴウゴ２ちゃんねる** · 04/10/12 17:21:09

なにが問題なのかが良くわからなかったり。
すでにnikuでやってるのと同じことでは？

**動け動けウゴウゴ２ちゃんねる** · 04/10/12 18:49:23

>>139で提案したのにスルーされたから
てっきりそういう方向じゃないのかと…
というかIPでこのスレ検索すると
それ以前にも何回か話が出てるのになあ

**FOX ★** · 04/10/13 11:17:19

root ★さーん
今日、ちょろちょろっと時間とれますかー?
BBS のIF等外回り変更しちゃいたいんですが、

1) bbs.2ch.net のクエリに IP を載せる
2) 乱立・連投爆撃解析ルーチンも呼んでもらう

が作業内容ですー

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 11:18:19

おつとめご苦労さんですっ

**FOX ★** · 04/10/13 11:26:36

$NOWTIME.$$.$ENV{'REMOTE_ADDR'}.$NEWTHREAD.$BYTES.$FORM{'key'}.$FORM{'bbs'}.$ENV{'SERVER_NAME'}.bbs.bbs.2ch.net

$NEWTHREAD = 0 : 既存のスレッドへの投稿(レス)
$NEWTHREAD = key : 新スレッド(スレ立て)

にします。

**▲:/usr/local/bin/ch2 -o i686** ◆P8fXJj6wwo · 04/10/13 11:30:54

で、IP乗せる是非はスルーですか＞狐先生

**FOX ★** · 04/10/13 11:36:18

>>805
まずいっすか?

**▲:/usr/local/bin/ch2 -o i686** ◆P8fXJj6wwo · 04/10/13 11:43:17

>>806
>>795-797

**FOX ★** · 04/10/13 11:54:58

詳しく

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 12:02:12

>>808
＞例えば、外の人がIPアドレスを含んだDNS queryを覗くことができるリスクが生じるとか

**FOX ★** · 04/10/13 12:12:32

root ★さんへ

メール発射しましたー

**root▲ ★** · 04/10/13 12:29:56

>>810
受け取りました。
今日は午後会議入っているので、15:00 以降あたりに。

というわけでこのDNSパケットが2ch外部に飛ぶ可能性があるのは、

・キャッシュサーバ <=> ルートサーバ
・キャッシュサーバ <=> netサーバ

ということになりますね。
2ch.net 以降のツリーはPIEにあるので、外には出ません。

ここの間の通信路を覗くことができた場合、何時何分何秒にどのIPアドレスからどの板の
どのスレに書いたか、がわかる可能性があります。
しかし、普通の一般ユーザが簡単にこれを見られるようになる、というわけでは
むろんありません。

ということで今の時点ではすぐに匿名性がおびやかされるリスクは少ないかなと思いますが、
まずは事実の把握はしておいたほうがいいかなと。

**root▲ ★** · 04/10/13 12:35:40

>>811
少ない => きわめて少ない

ぐらいかなと(ない、わけではありません)。

**FOX ★** · 04/10/13 12:49:57

おっと
あと　banana238 で延々と作業するので
SSH とか FTP の接続タイムアウトを
ぐーんと長くしておいていただけるとありがたいです

30min とか

**FOX ★** · 04/10/13 14:25:13

当初は、スレ立てのみを対象としていろいろ試行錯誤の予定

1) BBS で異常なスピードのスレたてを検知(いろいろ試行錯誤)
2) 検知したら qb6 に通知
3) qb6 は通知された情報を元に .htaccess を構築し全サーバに配布。

検知したらほぼリアルタイムで止まるはず。

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 14:37:34

すげー

**root▲ ★** · 04/10/13 14:48:13

>>813
既に以前（りゃ。

もうちょっとしたら、メールで依頼された件をすすめるです。

**root▲ ★** · 04/10/13 15:30:01

>>802
2) をやりました。

1) は、bbs.cgi の仕事かと。

**FOX ★** · 04/10/13 15:39:19

1) も完了していますー

ちと、動作確認してみます。

**root▲ ★** · 04/10/13 15:41:20

>>818
live16/live17 のバイナリ版 bbs.cgi を追随させました。

さて、こっちはこっちで ex7 あたりでごそごそしてみるか。

**FOX ★** · 04/10/13 15:42:10

きてます
きてます

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:01:21

(;´Д｀)ﾊｧﾊｧ

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:03:54

　の＿の　
　（u・(ェ)・）　ﾄﾞｷﾄﾞｷ
　（　∪ ∪
　と＿_）__）　

**▲:/usr/local/bin/ch2 -o i686** ◆P8fXJj6wwo · 04/10/13 16:05:37

乙です＞狐＆根　氏

で、結局導入ですか。
若干リスクはあるけど、2ch.net内部のDNSサーバを落とさせなければ問題なさそうですね

唯一の例外があるとすればsports2<->なんちゃら　かな

**FOX ★** · 04/10/13 16:09:23

>>816
やっぱり　すぐ切られちゃうんですけど、、、

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:14:06

設定が30sだったりして。

**root▲ ★** · 04/10/13 16:15:12

>>824
FTPすよね。ちとみてきます。

**root▲ ★** · 04/10/13 16:17:01

うーん、これになってるなぁ。

TimeoutIdle 1800
TimeoutNoTransfer 1800

一応リスタートしておきました。

**FOX ★** · 04/10/13 16:30:10

SSH もなんです

私の回線状況が悪いのかなぁ、、、
でも　tail とか top 走らせておくと問題ないし、

**FOX ★** · 04/10/13 16:34:37

検出機一号を作ってみた

この機能は通称「とかげの尻尾」です。

どこかで実験したいんだけど、
さすがに既設板でスレ乱立実験はまずいか?

**root▲ ★** · 04/10/13 16:35:04

>>828
回線状況かルータの設定ですね。たぶん。
流量があると落ちないというあたりが（りゃ。

KeepAlive yes (デフォルト)をnoにすればいいのかもですが、
そうするともしもの場合ごみが残るですね。

でも、一時的にsshdの設定変えておいたです。
ログアウト/ログインで効くはず。

**root▲ ★** · 04/10/13 16:35:32

>>829
(金)は？

**FOX ★** · 04/10/13 16:35:38

すんませんです、

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:36:45

>>829
テストの後、削除されるなら、問題ないとおもいますよ・・・

**FOX ★** · 04/10/13 16:36:46

>>831
超スレ乱立実験なんですが、
既存のスレ全部落ちると思われ、

**root▲ ★** · 04/10/13 16:37:43

>>834
F22止めてやればいいのかな。
あるいは、qb6にでも何か板を作るか。

**ひろゆき＠どうやら管理人 ★** · 04/10/13 16:40:02

金でいいんでないすか？

**root▲ ★** · 04/10/13 16:41:03

F22の止め方って、、、。

あ、いかん。見ちゃいけないんだった（す）。

**FOX ★** · 04/10/13 16:41:25

うっへへー

**VIPPERの行動はすぐばれる** · 04/10/13 16:43:02

VIP以外考えられないな

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:43:34

せめて金に立ってる924候補スレを救ってやってください

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:43:47

VIP来ていいよ！
どうせ圧縮ばかりされてるしね

**ヾ（ﾟﾊﾟ）ﾉ** ◆f0.zuburi6 · 04/10/13 16:44:11

　　　　　　　　　　　　　ｳｽﾞｳｽﾞ…

　　　　　　　　　＝≡＝　 ∧＿∧ 　　I'm ready.......
　　　　　　　　　／　＼　（・∀・　）／
　　　　　　　　〆　　　⊂　　　　つ∈≡∋
　　　　　　　　　|| 　γ ⌒ヽヽコノ　　　||
　　　　　　　　　||　.｜　　　|:::|∪〓　　||
　　　　　　　 .／|＼人＿.ノノ _||_　　／|＼

◆VIP/4645O6 · 04/10/13 16:44:13

http://ex7.2ch.net/news4vip/

**FOX ★** · 04/10/13 16:44:13

んじゃ　F22@qb6 とめてきます、

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:45:13

VIPでいいじゃん。
どうせFOXの遊び場なんだから

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:45:14

VIPでやれ、VIPで
誰も怒らないからさ
別に実験で立てたスレ削除しなくてもいいから

**知念あちこ** · 04/10/13 16:45:21

ここは何板ですか？

**▲ 某ソレ511** · 04/10/13 16:45:34

でも、もしqb6重くなるとここまで重くならないかな？

ま、いっか。

**FOX ★** · 04/10/13 16:46:51

f22@qb6 とめましたー
乱立してみてくださいー

検出できるかどうかの実験なんで
結果は私にしかわかりませんです。　yet

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:47:08

VIPでお願いします。

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:47:26

●+p2持ちを呼べー

**知念あちこ** · 04/10/13 16:47:28

そんなコトより釣り板に強制ID導入してください

**root▲ ★** · 04/10/13 16:48:01

deny も一時的に切る ? < qb6

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:48:35

>>849
ﾗｼﾞｬ

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:50:36

しょうがねえなあ。ＶＩＰのケツの穴を貸してやるぜ。
＊＜ﾍｲｶﾓﾝｶﾓﾝ!!

**ひろゆき＠どうやら管理人 ★** · 04/10/13 16:54:16

>>854
ペコちゃん

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:54:25

BBS_THREAD_TATESUGIを引き下げて！＜qb6

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:56:16

ほんとにやってもいいの？
あとで何か言わない？
つーかp2の人だけ？

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:56:30

金ってどこでしか？

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:56:32

>>857
たしかに

BBS_THREAD_TATESUGI=256
これじゃあ立たんのですたい

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:56:59

1にしてくり

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:59:10

>>859
運用情報(金)
http://qb6.2ch.net/operate2/

**FOX ★** · 04/10/13 16:59:29

>>860
いってくる
1 にすればいいのかな?
0 かな?

0にしてきます

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:59:32

手動でちまちま立てるんじゃなくて、すくりぷ㌧でだだだだだだだーーと立てないと意味ナインじゃないの？

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 17:00:25

さすがに6スレ目でエラーがでた

**桃太郎** ◆MOMOwomoIk · 04/10/13 17:01:09

>８６４
そんな肝してきた。スプリンクラーのようなスクリプトは、私は持ってま千円。

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 17:01:35

>>862
どうもありが㌧

**860** · 04/10/13 17:01:52

>>863
ごめん　256はここ(qb5)だった

今は
BBS_THREAD_TATESUGI=5

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 17:02:51

手動だと3-4秒で1スレが限界だね

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 17:03:16

今度はsambaに引っかかるわけだが