【野鳥の会】 BBS.2ch.net 全発言統計の巻 part1

**FOX ★** · 04/05/03 04:30

２ちゃんねるの全発言の統計を取ろうに挑戦

bbs.cgi に一個DNS問い合わせの処理を追加
発言バイト数.スレッドkey.板.サーバ.CGI名.BBS.2ch.net をlook up
この方法でやるとかなり低コストで出来る予感。

まずは現在空いている oyster138(旧game5)ではじめてみよう計画

**root ★** · 04/05/03 04:32

もうすぐ生誕の儀式します。
儀式はあっちのスレで。儀式後はこちらで。

**FOX ★** · 04/05/03 04:33

ほほーい

**動け動けウゴウゴ２ちゃんねる** · 04/05/03 04:43

ついでにIPアドレスも入れてユニークホスト数とか出したら面白くない？

**動け動けウゴウゴ２ちゃんねる** · 04/05/03 04:50

おおー、わくわく

**動け動けウゴウゴ２ちゃんねる** · 04/05/03 04:55

ｷﾀ━━━━(ﾟ∀ﾟ)━━━━!!!!!

**動け動けウゴウゴ２ちゃんねる** · 04/05/03 05:11

（　‘д‘）＜ウギャー

**動け動けウゴウゴ２ちゃんねる** · 04/05/03 05:38

ほほう。つなぎ変え荒らし自動検出器ですか。

**動け動けウゴウゴ２ちゃんねる** · 04/05/03 05:52

もしIPアドレスも入れると、どのホストがどの板のどのスレで発言しているかを
追跡できる。

**FOX ★** · 04/05/03 05:57

stats.2ch.net の中でいろいろ作ればいいのかな?

**root ★** · 04/05/03 06:00

さて、DNS側の基本作業は終わりました。
これからアカウント情報をFOXさんにメールします。

統計情報処理プログラムを作るときは、BBX/Rock54と同じようなフィルタリングが必要ですね。
つまり、PIEやHEのDNSキャッシュサーバか、あるいはuma/pekoサーバからの
DNSリクエストだけ受けるようにしないと、ノイズが乗ってしまうんで。

このへんはシステム側でできると思います。
つまり、FOXさんの処理プログラムにデータが行く時は、既にフィルタリングは済んでいると
想定してもらっていい、という仕様でいこううかと。

# どういうシステムデザインでいこうかいろいろ試行錯誤と脳内計画をしていたのが、
# 生誕の儀式が遅れた原因でした。スマソ。

**root ★** · 04/05/03 06:01

>>10
ですね。statsはoyster138上に作成しています。

**FOX ★** · 04/05/03 06:03

まずは　呼ぶほうから作りますか、

もえ引いてもいいですか?

**動け動けウゴウゴ２ちゃんねる** · 04/05/03 06:04

おもしろいことやるね
ｲｲﾖｲｲﾖｰ

**root ★** · 04/05/03 06:06

>>13
はい、準備OKです。

◆/yjFd7fSrw · 04/05/03 06:06

http://info.2ch.net/wiki/pukiwiki.php?%C1%B4%C8%AF%B8%C0%C5%FD%B7%D7%BC%E8%C6%C0%BA%EE%C0%EF
とりあえず、突貫工事のWikiページを…
しばらくの間は凍結しませんので、書き換えられる方は書き換えてみてください。

**root ★** · 04/05/03 06:09

>>16
対応はやっ。
Wikiが必要かなぁ、って書いてから寝ようと思っていた矢先に、、、。

ありがとうございます。

**FOX ★** · 04/05/03 06:10

こんなコードを書いていきなり tv5 に入れてみる

{
my $BYTES = length($FORM{'MESSAGE'});
my $BHOST = "$BYTES.$FORM{'key'}.$FORM{'bbs'}.$ENV{'SERVER_NAME'}.bbs.bbs.2ch.net";
my $YACHO = gethostbyname($BHOST);
}

**root ★** · 04/05/03 06:14

こんなのがどんどん来はじめた。
@400000004095649e3b09e634 d8dad9b3:ffa9:b4d8 + 0001 70.1083531769.morningcoffee.tv5.2ch.net.bbs.bbs.2ch.net

**FOX ★** · 04/05/03 06:15

qb4 に入れて特にエラーも出さないようなので、

全サーバに配ってみる

ただしaaa.bbb.ccc.ddd.bbs.2ch.net の部分は
どんどん変わる予定

**root ★** · 04/05/03 06:16

CGI名が一番上位に来るというのは、いいセンスですね。
将来read.cgiとかで何かしても、サブドメインを分ければ、サーバ側を分けられるので。

**root ★** · 04/05/03 06:16

>>20
配り終わったらpekoサーバでperlccしますので、お伝えください。

**FOX ★** · 04/05/03 06:18

>>22
配りましたー

**root ★** · 04/05/03 06:18

他のサーバからもどんどん来始めた。

@40000000409565b01efa986c d8dad9b3:6b39:f011 + 0001 73.1083146689.entrance.ex2.2ch.net.bbs.bbs.2ch.net
@40000000409565b02c41a894 267289e9:b519:8f38 + 0001 134.1083529195.livecx.live10.2ch.net.bbs.bbs.2ch.net
@40000000409565b02d762154 4113977a:4f0a:afc0 + 0001 90.1080893802.mj.gamble2.2ch.net.bbs.bbs.2ch.net
@40000000409565b100e80c4c d8dad9b3:b487:c7ea + 0001 68.1083508251.news.ex4.2ch.net.bbs.bbs.2ch.net
@40000000409565b1193a55fc d8dad9b3:2e95:9788 + 0001 117.1083531849.motenai.love2.2ch.net.bbs.bbs.2ch.net
@40000000409565b12103e1a4 d8dad9b3:2c87:5494 + 0001 26.1078758110.intro.etc.2ch.net.bbs.bbs.2ch.net
@40000000409565b12a11c874 d8dad9b3:e962:b596 + 0001 163.1083523761.base.sports5.2ch.net.bbs.bbs.2ch.net

**root ★** · 04/05/03 06:19

>>23
perlccしてきます。

**FOX ★** · 04/05/03 06:21

my $BYTES = length($FORM{'MESSAGE'});

現在この部分は、投稿時のバイト数ではなく
bbs.cgi が　>>1 なんかを置き換えたあとの実際に
dat に書き込まれるバイト数でーす

**FOX ★** · 04/05/03 06:24

>>25

bbs.2ch.net look up 個数の微分値、積分値は
MRTG or RTG 等を用いて　root★さんの方でやりますか?

私は、サーバ別とか板別とか中身をみての処理をやろうと思いますが、