【野鳥の会】 BBS.2ch.net 全発言統計の巻 part1

**FOX ★** · 04/05/03 04:30

２ちゃんねるの全発言の統計を取ろうに挑戦

bbs.cgi に一個DNS問い合わせの処理を追加
発言バイト数.スレッドkey.板.サーバ.CGI名.BBS.2ch.net をlook up
この方法でやるとかなり低コストで出来る予感。

まずは現在空いている oyster138(旧game5)ではじめてみよう計画

**FOX ★** · 04/10/12 02:27:18

公開?
意図的にする予定はないけど?

**動け動けウゴウゴ２ちゃんねる** · 04/10/12 02:33:46

見られる人だけ見られるようにしとけば無問題かと

見られる人 = 機械のようにイモを掘り続ける事の出来る人 or 機械

**動け動けウゴウゴ２ちゃんねる** · 04/10/12 02:37:09

特に問題なさそうな気はする。

**動け動けウゴウゴ２ちゃんねる** · 04/10/12 04:30:46

ダメですよ。

**動け動けウゴウゴ２ちゃんねる** · 04/10/12 04:49:24

>>788
IP Address が作業者にも見られるのが問題ありとするなら、
表示時に適当に暗号化して、ID化するのもいいかと。

**FOX ★** · 04/10/12 09:27:34

表示しないってば、
DNSくえりぃに載せる是非
まったく

**動け動けウゴウゴ２ちゃんねる** · 04/10/12 09:52:29

すまんこってす。。

**▲:/usr/local/bin/ch2 -o i686** ◆P8fXJj6wwo · 04/10/12 10:18:46

>>792
すぐに解読できないように16進数クエリってのはどうでせう。
たとえば255.255.255.0ならばFF.FF.FF.00

あまり忌みなさそうですが

**root▲ ★** · 04/10/12 13:03:50

DNS queryに乗せることが、どういう意味を持つかってことですね。
もしそれが何らかのリスクを持っているなら、だめってことかと。
(例えば、外の人がIPアドレスを含んだDNS queryを覗くことができるリスクが生じるとか)

さて、

**▲:/usr/local/bin/ch2 -o i686** ◆P8fXJj6wwo · 04/10/12 13:51:04

かといって暗号化するとなると共通式でかまわないとは思われだけど
そのエンコードとデコードを相当軽いやつにしないといけないですしね・・・

さて、

**root▲ ★** · 04/10/12 13:57:54

暗号化はパフォーマンスの点からいまいちだなぁ。

>>795 の意味をよく考えてみることが大事かなと。
さて、↓

**外野ｧｧﾝ** · 04/10/12 15:25:00

は南京玉簾～♪

**動け動けウゴウゴ２ちゃんねる** · 04/10/12 15:54:58

よくわからんが、誘導されたのでURI貼っておく。
http://pc5.2ch.net/test/read.cgi/software/1096811550/561
http://pc5.2ch.net/test/read.cgi/software/1096811550/563
http://pc5.2ch.net/test/read.cgi/software/1096811550/566

**動け動けウゴウゴ２ちゃんねる** · 04/10/12 17:21:09

なにが問題なのかが良くわからなかったり。
すでにnikuでやってるのと同じことでは？

**動け動けウゴウゴ２ちゃんねる** · 04/10/12 18:49:23

>>139で提案したのにスルーされたから
てっきりそういう方向じゃないのかと…
というかIPでこのスレ検索すると
それ以前にも何回か話が出てるのになあ

**FOX ★** · 04/10/13 11:17:19

root ★さーん
今日、ちょろちょろっと時間とれますかー?
BBS のIF等外回り変更しちゃいたいんですが、

1) bbs.2ch.net のクエリに IP を載せる
2) 乱立・連投爆撃解析ルーチンも呼んでもらう

が作業内容ですー

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 11:18:19

おつとめご苦労さんですっ

**FOX ★** · 04/10/13 11:26:36

$NOWTIME.$$.$ENV{'REMOTE_ADDR'}.$NEWTHREAD.$BYTES.$FORM{'key'}.$FORM{'bbs'}.$ENV{'SERVER_NAME'}.bbs.bbs.2ch.net

$NEWTHREAD = 0 : 既存のスレッドへの投稿(レス)
$NEWTHREAD = key : 新スレッド(スレ立て)

にします。

**▲:/usr/local/bin/ch2 -o i686** ◆P8fXJj6wwo · 04/10/13 11:30:54

で、IP乗せる是非はスルーですか＞狐先生

**FOX ★** · 04/10/13 11:36:18

>>805
まずいっすか?

**▲:/usr/local/bin/ch2 -o i686** ◆P8fXJj6wwo · 04/10/13 11:43:17

>>806
>>795-797

**FOX ★** · 04/10/13 11:54:58

詳しく

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 12:02:12

>>808
＞例えば、外の人がIPアドレスを含んだDNS queryを覗くことができるリスクが生じるとか

**FOX ★** · 04/10/13 12:12:32

root ★さんへ

メール発射しましたー

**root▲ ★** · 04/10/13 12:29:56

>>810
受け取りました。
今日は午後会議入っているので、15:00 以降あたりに。

というわけでこのDNSパケットが2ch外部に飛ぶ可能性があるのは、

・キャッシュサーバ <=> ルートサーバ
・キャッシュサーバ <=> netサーバ

ということになりますね。
2ch.net 以降のツリーはPIEにあるので、外には出ません。

ここの間の通信路を覗くことができた場合、何時何分何秒にどのIPアドレスからどの板の
どのスレに書いたか、がわかる可能性があります。
しかし、普通の一般ユーザが簡単にこれを見られるようになる、というわけでは
むろんありません。

ということで今の時点ではすぐに匿名性がおびやかされるリスクは少ないかなと思いますが、
まずは事実の把握はしておいたほうがいいかなと。

**root▲ ★** · 04/10/13 12:35:40

>>811
少ない => きわめて少ない

ぐらいかなと(ない、わけではありません)。

**FOX ★** · 04/10/13 12:49:57

おっと
あと　banana238 で延々と作業するので
SSH とか FTP の接続タイムアウトを
ぐーんと長くしておいていただけるとありがたいです

30min とか

**FOX ★** · 04/10/13 14:25:13

当初は、スレ立てのみを対象としていろいろ試行錯誤の予定

1) BBS で異常なスピードのスレたてを検知(いろいろ試行錯誤)
2) 検知したら qb6 に通知
3) qb6 は通知された情報を元に .htaccess を構築し全サーバに配布。

検知したらほぼリアルタイムで止まるはず。

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 14:37:34

すげー

**root▲ ★** · 04/10/13 14:48:13

>>813
既に以前（りゃ。

もうちょっとしたら、メールで依頼された件をすすめるです。

**root▲ ★** · 04/10/13 15:30:01

>>802
2) をやりました。

1) は、bbs.cgi の仕事かと。

**FOX ★** · 04/10/13 15:39:19

1) も完了していますー

ちと、動作確認してみます。

**root▲ ★** · 04/10/13 15:41:20

>>818
live16/live17 のバイナリ版 bbs.cgi を追随させました。

さて、こっちはこっちで ex7 あたりでごそごそしてみるか。

**FOX ★** · 04/10/13 15:42:10

きてます
きてます

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:01:21

(;´Д｀)ﾊｧﾊｧ

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:03:54

　の＿の　
　（u・(ェ)・）　ﾄﾞｷﾄﾞｷ
　（　∪ ∪
　と＿_）__）　

**▲:/usr/local/bin/ch2 -o i686** ◆P8fXJj6wwo · 04/10/13 16:05:37

乙です＞狐＆根　氏

で、結局導入ですか。
若干リスクはあるけど、2ch.net内部のDNSサーバを落とさせなければ問題なさそうですね

唯一の例外があるとすればsports2<->なんちゃら　かな

**FOX ★** · 04/10/13 16:09:23

>>816
やっぱり　すぐ切られちゃうんですけど、、、

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:14:06

設定が30sだったりして。

**root▲ ★** · 04/10/13 16:15:12

>>824
FTPすよね。ちとみてきます。

**root▲ ★** · 04/10/13 16:17:01

うーん、これになってるなぁ。

TimeoutIdle 1800
TimeoutNoTransfer 1800

一応リスタートしておきました。

**FOX ★** · 04/10/13 16:30:10

SSH もなんです

私の回線状況が悪いのかなぁ、、、
でも　tail とか top 走らせておくと問題ないし、

**FOX ★** · 04/10/13 16:34:37

検出機一号を作ってみた

この機能は通称「とかげの尻尾」です。

どこかで実験したいんだけど、
さすがに既設板でスレ乱立実験はまずいか?

**root▲ ★** · 04/10/13 16:35:04

>>828
回線状況かルータの設定ですね。たぶん。
流量があると落ちないというあたりが（りゃ。

KeepAlive yes (デフォルト)をnoにすればいいのかもですが、
そうするともしもの場合ごみが残るですね。

でも、一時的にsshdの設定変えておいたです。
ログアウト/ログインで効くはず。

**root▲ ★** · 04/10/13 16:35:32

>>829
(金)は？

**FOX ★** · 04/10/13 16:35:38

すんませんです、

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:36:45

>>829
テストの後、削除されるなら、問題ないとおもいますよ・・・

**FOX ★** · 04/10/13 16:36:46

>>831
超スレ乱立実験なんですが、
既存のスレ全部落ちると思われ、

**root▲ ★** · 04/10/13 16:37:43

>>834
F22止めてやればいいのかな。
あるいは、qb6にでも何か板を作るか。

**ひろゆき＠どうやら管理人 ★** · 04/10/13 16:40:02

金でいいんでないすか？

**root▲ ★** · 04/10/13 16:41:03

F22の止め方って、、、。

あ、いかん。見ちゃいけないんだった（す）。

**FOX ★** · 04/10/13 16:41:25

うっへへー

**VIPPERの行動はすぐばれる** · 04/10/13 16:43:02

VIP以外考えられないな

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:43:34

せめて金に立ってる924候補スレを救ってやってください

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:43:47

VIP来ていいよ！
どうせ圧縮ばかりされてるしね

**ヾ（ﾟﾊﾟ）ﾉ** ◆f0.zuburi6 · 04/10/13 16:44:11

　　　　　　　　　　　　　ｳｽﾞｳｽﾞ…

　　　　　　　　　＝≡＝　 ∧＿∧ 　　I'm ready.......
　　　　　　　　　／　＼　（・∀・　）／
　　　　　　　　〆　　　⊂　　　　つ∈≡∋
　　　　　　　　　|| 　γ ⌒ヽヽコノ　　　||
　　　　　　　　　||　.｜　　　|:::|∪〓　　||
　　　　　　　 .／|＼人＿.ノノ _||_　　／|＼

◆VIP/4645O6 · 04/10/13 16:44:13

http://ex7.2ch.net/news4vip/

**FOX ★** · 04/10/13 16:44:13

んじゃ　F22@qb6 とめてきます、

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:45:13

VIPでいいじゃん。
どうせFOXの遊び場なんだから

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:45:14

VIPでやれ、VIPで
誰も怒らないからさ
別に実験で立てたスレ削除しなくてもいいから

**知念あちこ** · 04/10/13 16:45:21

ここは何板ですか？

**▲ 某ソレ511** · 04/10/13 16:45:34

でも、もしqb6重くなるとここまで重くならないかな？

ま、いっか。

**FOX ★** · 04/10/13 16:46:51

f22@qb6 とめましたー
乱立してみてくださいー

検出できるかどうかの実験なんで
結果は私にしかわかりませんです。　yet

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:47:08

VIPでお願いします。

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:47:26

●+p2持ちを呼べー

**知念あちこ** · 04/10/13 16:47:28

そんなコトより釣り板に強制ID導入してください

**root▲ ★** · 04/10/13 16:48:01

deny も一時的に切る ? < qb6

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:48:35

>>849
ﾗｼﾞｬ

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:50:36

しょうがねえなあ。ＶＩＰのケツの穴を貸してやるぜ。
＊＜ﾍｲｶﾓﾝｶﾓﾝ!!

**ひろゆき＠どうやら管理人 ★** · 04/10/13 16:54:16

>>854
ペコちゃん

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:54:25

BBS_THREAD_TATESUGIを引き下げて！＜qb6

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:56:16

ほんとにやってもいいの？
あとで何か言わない？
つーかp2の人だけ？

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:56:30

金ってどこでしか？

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:56:32

>>857
たしかに

BBS_THREAD_TATESUGI=256
これじゃあ立たんのですたい

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:56:59

1にしてくり

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:59:10

>>859
運用情報(金)
http://qb6.2ch.net/operate2/

**FOX ★** · 04/10/13 16:59:29

>>860
いってくる
1 にすればいいのかな?
0 かな?

0にしてきます

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 16:59:32

手動でちまちま立てるんじゃなくて、すくりぷ㌧でだだだだだだだーーと立てないと意味ナインじゃないの？

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 17:00:25

さすがに6スレ目でエラーがでた

**桃太郎** ◆MOMOwomoIk · 04/10/13 17:01:09

>８６４
そんな肝してきた。スプリンクラーのようなスクリプトは、私は持ってま千円。

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 17:01:35

>>862
どうもありが㌧

**860** · 04/10/13 17:01:52

>>863
ごめん　256はここ(qb5)だった

今は
BBS_THREAD_TATESUGI=5

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 17:02:51

手動だと3-4秒で1スレが限界だね

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 17:03:16

今度はsambaに引っかかるわけだが

**FOX ★** · 04/10/13 17:03:59

今の設定値で
http://qb6.2ch.net/test/read.cgi/operate2/1097654535/1
これ立てた人は引っかかりました。

**FOX ★** · 04/10/13 17:04:34

うちかたやめー

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 17:05:07

ブラウザ沢山立ち上げて、一気に書き込みボタン押したら少しは速くなるかなあ

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 17:05:07

１スレ立て／１分で３スレ立てれば、ありえない速度なのかもしれないけど。

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 17:05:43

>>871
立てた人です・・・
引っかかりませんでしたよ・・・

**桃太郎** ◆MOMOwomoIk · 04/10/13 17:05:46

というか、本陣から、爆撃停止の命令が出たぽ。

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 17:06:03

１スレしか立てれなかった(´･ω･`)

**FOX ★** · 04/10/13 17:06:09

検出部はなんとなく動作しているです

これから BBS.2ch.net -> qb6 の通知 & qb6 の .htaccess 自動書き換え
作ります。結構鋭敏にdenyされるかも、、、(chicken skin ですけど)

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 17:06:09

終了～
　^(ノ゜ー゜)ノ☆パチパチ☆ヾ(゜ー゜ヾ)^

**FOX ★** · 04/10/13 17:07:34

C のスクリプトの中から
qb6.2ch.net/xxx/yyy.cgi?a=2&b=3
とかって呼び出すの難しいの?

**root▲ ★** · 04/10/13 17:07:44

>>875
今は「検出」しかやってない、と。

検出 => deny は、>>878 のとおりで、これから。

**消年隊 ★** · 04/10/13 17:09:08

爆撃痕処理チーム、待機中なり。

**FOX ★** · 04/10/13 17:10:39

30スレッド以上立てたつわものもいたりして、、、

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 17:10:41

ああ　引っかからなかったか・・

**FOX ★** · 04/10/13 17:11:16

>>882
あっ　おそうじお願いしますー

次のテストまではまだまだ時間かかると思われ、

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 17:12:54

>>885
とりあえず
BBS_THREAD_TATESUGI=0
は変えたほうが

**消年隊 ★** · 04/10/13 17:12:58

>885　そうじのおばちゃんチーム出勤します。。。　ぜいぜいひーひー