bbs.cgi再開発プロジェクト5

**動け動けウゴウゴ２ちゃんねる** · 04/12/20 07:38:07

peko鯖の稼動によりﾎﾞﾄﾙﾈｯｸの一つである事がより明らかになった
bbs.cgi作り直しプロジェクトです。

【開発環境の工事現場】
また挑戦。＠2ch掲示板　　http://dso.2ch.net/myanmar/
また挑戦２。＠2ch掲示板　http://dso.2ch.net/yangon/

関連スレなどは >>2-5 くらい

**未承諾広告※** ◆TWARamEjuA · 2005/04/02(土) 13:29:26

あ、そなのか♪

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 13:29:30

>>872
ひろゆきの言いたい事は、ソースを隠すことには
セキュリティの観点から見てそれなりの利点がある、ということでしょ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 13:30:07

そんなことよりおまいら、mozillaのソースコードが流出したらしいですよ。

ttp://www.hyuki.com/tf/?20040401145329

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 13:30:19

HTTPサーバの動きとかCGIの起動原理とかまでひっくるめてまで隠せるんならな。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 13:30:33

何自分にレスしてるんだろう。。。

**ひろゆき＠どうやら管理人 ★** · NG

１「ソース隠すことはセキュリティ対策になることもある」
２「ソースオープンにすることはセキュリティ対策になることもある」

んで、まだ動いてないシステムであれば、２の可能性はありますが、
既に動いてるシステムであると１の可能性が高いのですな。

オープンしたとたんにソースを見なければわからない脆弱性で
いきなり攻撃される可能性もあるわけです。

◆MIPS.kHN86 · 2005/04/02(土) 13:33:55

これは、つまり公開しないってことですよね。
それはそうと、書き込み時間の取得のタイミングを変更する
ことは無いですかね？あまり実益が無いですけど、書き込み時刻と
スレ番号がずれることがなくなると思うのですが。

**動け動けウゴウゴ２ちゃんねる** · NG

みんなbbs.cgiのソース見たいだけだよ。何に使うのかは知らんが。

**ひろゆき＠どうやら管理人 ★** · NG

実益のないことにリソースを使ってもしょうがないような、、、

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 13:36:29

漏れが言いたいのはセキュリティ対策に「万全」「完璧」など存在しないということ。
永遠に努力を強いられる過酷な問題です。

ここの場合、ソース隠してもCGI仕様に則ってるので少なくともインタフェース仕様は公開されているも同然。インターフェースのみ分かっているブラックボックスのセキュリティホールをどうやって見つけられるかというとこに焦点が集まる。

**ひろゆき＠どうやら管理人 ★** · NG

永遠に見つからないセキュリティホールはセキュリティホールではない。

**未承諾広告※** ◆TWARamEjuA · 2005/04/02(土) 13:39:24

永遠に出てきちゃうから楽しいんだよね♪

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 13:40:25

永遠に見つからない保証はないよ？

で、話戻すとインターフェースのみ分かってるブラックボックスの突付き方はまずいろんなアクセスを試みること。なので次にやらなければいけないのは外部からのアクセスの監査になります。それはやってるのかな？

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 13:41:18

>>882
ソース隠せば、2ちゃんのセキュリティホールをわざわざ解析してまで
攻撃しよう、と思うハッカーが少なくなるんじゃないか、ということではないでしょうか

まあ、2ちゃんがどの程度セキュリティ対策を重視しているのか
甚だ疑問ですけどね。そんなに大事なら、サーバ別負荷の統計とか
狐さんの実験とか、全部やめさせてしまえばいい。もっと安全になりますよｗｗｗ

◆MIPS.kHN86 · 2005/04/02(土) 13:44:46

>>881
確かにそうですね。遊べるし、困っているわけでも無いですし。
こんなことが出来て面白いので。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 13:47:23

>>878
アバウトなアーキテクチャぐらいは公表してもいいかと思います。

ログ記録部分とか秘密にしなければならない部分は非公開が鉄則です。

まあそれでも見せたくなければNDAでも結んで見てもらうっていう手もありますがね
某有名RMSが激しく抗議しそうですがw

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 13:52:51

もともとセキュリティ対策ってのは実益が無いのに注力しないといけない類の活動ですよ。

**ひろゆき＠どうやら管理人 ★** · NG

アーキテクチャは公表してもいいんじゃないですか？
ただ、ソースを読める人がアーキテクチャをいちいち書くのを
嫌がらなければの話ですが、、、

RMSってなんですか？

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 13:56:11

>>890
RMS=個人名イニシャルです。むむむさんあたりなら確実にぴんと来るでしょう。

＞ただ、ソースを読める人がアーキテクチャをいちいち書くのを
＞嫌がらなければの話ですが、、、

そんなにむずかしいことじゃないはずですよ。

整形する
datにかく

なんてことをかいていけばいいので。

**FOX ★** · 2005/04/02(土) 14:05:35

アーキテクチャって bbs.cgi でいうと何ですか?

◆MIPS.kHN86 · 2005/04/02(土) 14:06:22

そうそう、時間のことは結局下記のようなことです。
だからどうしたと言われたらおしまいなのですが。
とりあえず、故意に時間がずらせると言うことだけです。

http://qb5.2ch.net/test/read.cgi/operate/1111551639/749-751

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 14:06:33

アーキテクチャはいきあたりばったりでソース主導で書いたと吐露されても困るな。ｗ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 14:15:20

ストールマンのことか！

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 14:15:49

>>892
どーゆー手順で処理しているか、ということです

アルゴリズムといったほうが正しかったかもしれない。

**FOX ★** · 2005/04/02(土) 14:16:50

それは既に流出しているような
それも何回も、

それ以来変わっていません。

**FOX ★** · 2005/04/02(土) 14:20:43

再度書いて見ました

２ちゃんねる bbs.cgi アーキテクチャ

1) 始まり
↓
2) 各種パラメータ取得
↓
3) パラメータチェック(この処理超巨大) →　byebye
↓
4) dat書き込み
↓
5) index.html subject.txt subback.html 更新

**ひろゆき＠どうやら管理人 ★** · NG

>>893
おぉ、どうやるんですか？

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 14:25:24

各鯖ごとの/dev/random先頭16byteを公開して下さいお願い

**動け動けウゴウゴ２ちゃんねる** · NG

>>900
それ公開したら、書き込む前にID分かるようになるんだっけ？

**動け動けウゴウゴ２ちゃんねる** · NG

っていうかIDの算出方法そのものも教えて下さい＞＜

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 14:27:57

>>900
そこはだめよん　見ちゃ駄目えっちぃ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 14:31:26

ついでに彼女の作り方も教えてください

**FOX ★** · 2005/04/02(土) 14:32:25

>>902
そんなの公開されてるでしょ
というかスレ上で公開でみんなでわいわいやったんだから

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 14:33:25

>>904
ヒント：http://ex10.2ch.net/news4vip/

◆MIPS.kHN86 · 2005/04/02(土) 14:33:35

>>899
故意と言っても数分程度しかずらすことは出来ないのですが、先ほどの内容で説明しますと・・・

まず、サーバに接続して、HTTPのヘッダ情報を送ります↓

POST /test/bbs.cgi HTTP/1.0
Host: qb5.2ch.net
Content-length: 129
Referer: http://qb5.2ch.net/operate/
User-Agent: Monazilla/1.00
Cookie: PON=****.***.co.jp; expires=Friday, 01-Jan-2010 00:00:00 GMT; path=/
Connection: close

↑ここまで送ると書き込み時間が決定します。
その後、↓の内容を時間をかけて送信すると、その時間差が生じて書き込まれてしまう。

bbs=operate&key=1111551639&time=1104688508&submit=%8f%91%82%ab%8d%9e%82%de&FROM=&mail=sage&MESSAGE=%82%b1%82%f1%82%c8%8a%b4%82%b6

ただ、↑の情報を送信している間に誰かが書きこまないと、時間がずれているか分からないです。
とりあえず、これだけのことなんですが。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 14:33:51

ひろゆきおすすめのエロゲ

**ひろゆき＠どうやら管理人 ★** · NG

コネクションを引っ張るんですかぁ。

桶屋 · 2005/04/02(土) 14:36:22

>>907
低速回線環境(PHSなど)と高速回線環境(FTTHなど)が混じったときの
タイムマシーン現象に似せているわけですね。
少なくともこの現象は、もう何年も前からありました。

桶屋 · 2005/04/02(土) 14:38:10

TCPのパケットを故意に分割して、タイムアウトするまで引っ張るという感じですね。

◆MIPS.kHN86 · 2005/04/02(土) 14:42:57

>>909-911
そうです。ただ、これによって著しく不利益が生じるわけではないと
思うので、特に問題ではないですよね。

実際、この方法でコネクションを引っ張り過ぎるとエラーで
切断/書き込まれないようなので最高でも数十分？くらいかな。

**root▲ ★** · 2005/04/02(土) 14:53:05

コネクション引っ張る(= 受付嬢を占有する)のはサーバにとっては、コスト高いですね。
だって、受付の人数って決まっているし。

遅い携帯が受付を占領してhttpdがまずしくなるのと、おなじりくつかと。

というかそうか、こういう場合に遠慮なく切っちゃうようにタイムアウト入れるのは、
効果あるのか。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 14:53:54

>>913
今からやって遊ぼうと思ってたのに

**動け動けウゴウゴ２ちゃんねる** · NG

切っちゃっていいんじゃないですか？
数十分も引っ張って迷惑するのは投票所ｗ

**root▲ ★** · NG

ちなみに、携帯系サーバは既にTimeout 5にしてあります。
相当効果あったと、記憶しています。

#
# Timeout: The number of seconds before receives and sends time out.
#
#Timeout 300
Timeout 5

桶屋 · 2005/04/02(土) 14:58:03

(知っている人は気付いていたのだろうけど)この方法が公になったので、
同じ事を利用してリソースを食いつぶそうという愉快犯が出てくるかもしれない。

タイムアウトを設定する手段は準備しておいた方がいいと思われます。

桶屋 · 2005/04/02(土) 14:59:30

失礼。いつでもコーイということでしたか。(;^ ^

**root▲ ★** · NG

>>917
まぁ、ステータスログは逐次的にとっているので、
問題になるようなら、ぼちぼち >>916 を掲示板サーバにも入れるってことで。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 15:02:57

重くなると十分単位で書き込みがずれたり
入れ替わったりするですね

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 15:32:23

テスト

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 18:33:01

自作PC板の日付表示、ず～っと、あのままですか？
いゃ、自分はｱﾑﾀﾞｰなんで今のままで良いんですけどね。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/02(土) 21:20:35

>>917
時間ずらしは前にもテストスレで(◆MIPS.kHN86さんが？)実験してたから
知っている人は多そう。(少なくとも、自分はそれを見て気付いた。)

◆MIPS.kHN86 · 2005/04/02(土) 22:06:27

>>923
2週間くらい前のでしたらきっと自分です。テストスレで試していました。
実況では時間がずれることはよくあるので、この現象自体は皆さん
知っていると思います。
しかし、実際のところ、これには少し準備が必要なわりに反応が鈍いせいか
やってる人を見たことないですね。

**【沈黙-ω-】** ◆.0e0wEv5W6 · NG

sage

**動け動けウゴウゴ２ちゃんねる** · 2005/04/04(月) 22:26:14

低負荷時にindex更新頻度を上げるってのはできないんだろうか？

**動け動けウゴウゴ２ちゃんねる** · NG

ってゆうか、
「3分以上古かったらindex更新」とかにしたら？
index生成って結構処理おっきいと思うんだけど。

**動け動けウゴウゴ２ちゃんねる** · NG

index作成はbbs.cgiから切り離して、index作成cgiをcronで動かす。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/05(火) 00:21:52

cronでもコストが大きいからdaemonにしちゃうとか。
タイマとキューを使って細かく制御できればベター

**動け動けウゴウゴ２ちゃんねる** · 2005/04/07(木) 11:15:48

index と subject.txt はどう違うのでしょうか?

**動け動けウゴウゴ２ちゃんねる** · 2005/04/07(木) 13:53:31

>>930
http://qb5.2ch.net/operate/index.html
http://qb5.2ch.net/operate/subject.txt
みたままですけど。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/07(木) 18:06:21

>>898

2) 各種パラメータ取得
↓
3) パラメータチェック(この処理超巨大) →　byebye

これを順番を適切にするだけでかなり違うような希ガス

・軽くて重要なチェック(たとえばBBQ)を前に
・重くてあまりはねる確率の少ないものを真ん中に
・統計用を最後に

といったかんじで。
で、ぜんぶOKになってはじめてdatをひらく、と(もっともこれは既にやっていると思いますが)。

**動け動けウゴウゴ２ちゃんねる** · NG

1) 適切ってのが具体的にわからない。
2) わかったとしても、順番を並び替えるとたぶん動かないだろう。。。

という二重苦だったりします

BASIC (80年代初頭) で組んであると思ってください。

**動け動けウゴウゴ２ちゃんねる** · NG

BASIC......ですか、なにもかもなつかしい。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/07(木) 19:00:07

ベーマガ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/07(木) 19:17:44

1から書き直した方が早かったりするんだろうな

**動け動けウゴウゴ２ちゃんねる** · 2005/04/08(金) 04:15:58

Fortran77
C（78年）
ADA（79年）

**動け動けウゴウゴ２ちゃんねる** · 2005/04/08(金) 04:27:25

Gmen 75
Carmen 77

**動け動けウゴウゴ２ちゃんねる** · NG

Konnichiwa 70

**動け動けウゴウゴ２ちゃんねる** · 2005/04/08(金) 04:35:04

FOX★風邪治った？

**動け動けウゴウゴ２ちゃんねる** · NG

歌いまくったら
また喉が・・・

**動け動けウゴウゴ２ちゃんねる** · 2005/04/08(金) 04:39:35

>>939
三波春夫ですかー！

**動け動けウゴウゴ２ちゃんねる** · 2005/04/08(金) 04:41:07

じゃあプロフ直しておけよｗ

**(^-^)犬** ◆VET4349ZB. · 2005/04/08(金) 11:12:51

>>940
やべ、「風俗治った」に見えた。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/08(金) 12:01:14

彼の風俗は直りません。。。

**930** · 2005/04/08(金) 13:22:31

>>931

subject.txt は、更新順(sage考慮)に並べてある。
index.html はその上位 10 個を HTML 化した、トップのページと。

bbs.cgi は Perl で書かれている。

こんなところであっていますか?

**Why?** ◆ouWMQKaTMk · NG

全部白紙に戻すような話だけど、
xmlで全掲示板を構成すれば、鯖の負担も少ないし(2ch程度の大規模サーバーだからの話ですが・・・)、容量も負担しない。
上手くいけば、今のdatの3/4の容量削減が出来ると思われ。
read.cgiの再開発プロジェクトの住民に悪いが、read.cgiもいらなくなる。
WebProg板とWeb製作板の住民に協力を依頼すれば、たくさんの住民が食いついてくるし・・・
ひろゆき・root両氏の降臨ｷﾎﾞﾝﾇ
>946多分あってる。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/08(金) 17:46:04

その論理はちょっとおかしい気が
xmldb(?)で～
ならまだわかるけど

**動け動けウゴウゴ２ちゃんねる** · 2005/04/08(金) 17:51:04

高度なネタですね

**Why?** ◆ouWMQKaTMk · NG

まぁdatや、subject.txtにある、<>が必要なくなるのでｗ
subject.txtのsubject.csvに変えて<>→,にすれば無問題。
>949氏等へ
専門的な話をしてｽﾏｿ。

root氏やFOX氏なら直ぐに話が分かるような気がしますが・・・
とりあえず、管理団の回答を待ってます。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/08(金) 18:57:32

ひろゆきが理解できなくて没な悪寒

**Why?** ◆ouWMQKaTMk · NG

>951
ひろゆき氏になんとか説得してみますよ。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/08(金) 19:30:35

<dat>
  <res name="動け動けウゴウゴ２ちゃんねる" mail="sage" date="2005/04/08(金) 17:46:04 ID:AQwRoo140">
    その論理はちょっとおかしい気が <br> xmldb(?)で～ <br> ならまだわかるけど
  </res>

<res name="動け動けウゴウゴ２ちゃんねる" mail="sage" date="2005/04/08(金) 17:51:04 ID:+8zeIhpi0">
    高度なネタですね
  </res>

</dat>

讃岐 ◆IamaVIPdCI · 2005/04/08(金) 19:33:01

>>952
がんばれ

**Why?** ◆ouWMQKaTMk · 2005/04/08(金) 19:40:35

>953そんなかんじで
修正を加えると
<log>
<res num="948" name="動け動けウゴウゴ２ちゃんねる" mail="sage" date="2005/04/08(金)" time="17:46:04" ID="AQwRoo140">
その論理はちょっとおかしい気が <br> xmldb(?)で～ <br> ならまだわかるけど
</res>

<res num="949" name="動け動けウゴウゴ２ちゃんねる" mail="sage" date="2005/04/08(金)" time="17:51:04" ID="+8zeIhpi0">
高度なネタですね
</res>

</dat>
相談：このような場合、レスアンカーはどのようにすれば指定したレスに飛ぶんでしょうかね？/スレ番.xml?num="レスNo."でOKでしょうか？
>954あり
言い忘れたけど、HTML化も不要だな。
HTML同然だし。

**Why?** ◆ouWMQKaTMk · 2005/04/08(金) 19:41:12

ｽﾏｿ修正
</dat>→</log>

**root▲ ★** · NG

XMLは、いろいろなところで流行りだったりして、
各種フォーマットをそれにするというのは、センスとしてはむろんありえます。

で、もし２ちゃんねるのようなものを一から作るとしたら、
XMLベースでいくというのはかなりありえますが、
既に動いている２ちゃんねるに導入するからには、
「作るに足る大きなメリット」言い換えれば「XML化によって見える果実」が
必要な気がします。

後ろにDBを置きやすいとか、標準形式だからブラウザ作ったりする人が対応しやすいとか、
将来の拡張が容易とか、そのへんのもの＊以外＊に、何かあるといいかもです。

より、実利的な何かがいいかも。
例えば、10倍負荷に強くなるとか、かける工数に対してメリットが目に見える形で存在するなら、
その気にさせる動機になるかもです。

ここの掲示板は「非互換な形にいきなり内部形式を変える」ことには、かなり軽く動くところがあるので、
果実が甘くておいしいなら「いきなりバサっと導入」は、常にありえるかと。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/08(金) 19:56:41

大幅な仕様変更で専ブラ使えなくなったら困るぞ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/08(金) 20:11:29

メリット無くてもデメリットさえあってもひろゆきがやるといったらやる悪寒

讃岐 ◆IamaVIPdCI · 2005/04/08(金) 20:21:54

html同然ってことは●の販売数落ちるかな？

**動け動けウゴウゴ２ちゃんねる** · NG

常に全レス読み込みか、

**動け動けウゴウゴ２ちゃんねる** · 2005/04/08(金) 21:10:37

そうか、Ajaxか…。だがしかし、、、

**動け動けウゴウゴ２ちゃんねる** · 2005/04/08(金) 21:24:59

>>961
転送量を考えれば XML にしたって
read.cgi かなんかでの行数制限読み込みは必要だろう

**動け動けウゴウゴ２ちゃんねる** · 2005/04/08(金) 22:58:20

２ちゃんの負荷分散は専ブラによるところが多い。
現在はIEや携帯の負荷を分散させる作戦中。
１００％htmlベースの通常の掲示板というのはシステムの増強なしには無理でしょう。
有料化など収益があれば別ですけど。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/08(金) 23:30:02

「bbs.cgiスレでXML化を言い出す奴=Java屋の会社に入った新入社員」
「bbs.cgiスレでMySQL化を言い出す奴=オープンソースWebASPを聞きかじった新入社員」

**動け動けウゴウゴ２ちゃんねる** · 2005/04/08(金) 23:38:56

XML化してもハードウエアには優しいかも知れんけど、トラフィック的にはそうでも無いんじゃないの？

**動け動けウゴウゴ２ちゃんねる** · 2005/04/08(金) 23:51:03

XMLの構文解析処理って結構重いんじゃないの？

**動け動けウゴウゴ２ちゃんねる** · 2005/04/09(土) 01:49:25

libxml2をincludeしてソース書いたことあるか？

**動け動けウゴウゴ２ちゃんねる** · 2005/04/09(土) 02:06:28

parser自体まともじゃないのもあるけどな

**動け動けウゴウゴ２ちゃんねる** · 2005/04/09(土) 04:25:16

>>955
ちょっと要領を得ないのだけど、XML化したとして、そのparseはクライアント側が
やるんでしょうか？XMLをブラウザに丸投げしてブラウザが解釈？
だとするとクライアントの互換性が問題になってくると思う。

サーバーがparseするんであれば、その負荷が馬鹿にならないと思うし、
(Parser作ったことある人なら分かると思うけど、複雑な構文を殻に使った
入れ子のparserってかなり負荷大きい)結局read.cgiがベタデータをparseするのと
何も変わらんので、むしろ負荷は大きくなると思う。

あと、datの容量が減るというのが良く分からないのはどうして？
>>953の形式の方がディスクのリソース食いそうだけど。

ちとXMLについてはほとんど無知なのでおかしな事言ってたらｽﾏｿ。

**ひろゆき＠どうやら管理人 ★** · NG

>>965
同意。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/09(土) 06:00:38

>>950
ネタじゃなくてマジだったのかよｗ。レスついてるしネタにしとけばいいのに