read.cgi再開発スレ Part2

**root▲ ★** · 05/01/17 06:11:01

◆cZfSunOs.Uさん作成のmod_cgidsoにより、大きな負荷軽減が図られたread.cgi。
このスレでは、そんなread.cgiの(再)開発・実装すべき機能について取り扱います。

前スレより:
574 名前：FOX ★[sage] 投稿日：05/01/05 15:54:28 ID:???
全てのサーバ cobra/toger/banana で read.cgi の dso化が完了。

これから href の置き換え ime.nu 対応を行い
それが終了したら第一ステップは完。

第２ステップは
2-1) bug つぶし
2-2) 仕様の変なところは変更
2-3) 時代背景にあわせたデコレーション

こんなとこかと、

前スレ:
read.cgi再開発スレ
http://qb5.2ch.net/test/read.cgi/operate/1087199303/

**動け動けウゴウゴ２ちゃんねる** · 05/02/01 17:02:26

スタイルシートやめてテーブル＆水平線にしとけばいいんでないの

[―{}@{}@{}-] **某47** ◆ap/yuix/tw · 05/02/02 13:00:24

>>117
てかIEと見た目が同じ気がするが…

**HTTP_USER_AGENT null** · 05/02/02 15:06:36

rootﾁｬｿ、"UA無し"も中間に入れてヨウ。。。頼むヨォ。。。

**root▲ ★** · 05/02/02 15:11:34

>>120
今UAなしだとどうなるんだっけ。
ちと試してみるか。

**root▲ ★** · 05/02/02 15:12:53

ただ切れるのか。いまいちすね。
ちと、見てみます。

$ telnet qb5.2ch.net 80
Trying 206.223.147.230...
Connected to qb5.2ch.net.
Escape character is '^]'.
GET /test/read.cgi/operate/1105909861/ HTTP/1.1
Host: qb5.2ch.net

Connection closed by foreign host.

**root▲ ★** · 05/02/02 15:36:58

UA無しもとりあえず許すようにした、、、けど、今後もそうするかは不明。
プログラムからぼこぼこ叩くのは、できるだけやめてほしかったりするかも。かも。

read.cgi ver 05.0.0.16 2005/02/02

**動け動けウゴウゴ２ちゃんねる** · 05/02/02 17:52:40

>>121-123
あれ見えた！と思ってとんで来た！

どうもありかとう。
ぼこぼこ叩く様な香具師ってUA騙ったり、robots.txtシカトしたりしますよ、、、
なんか"hoge"とか出鱈目な UA 送っても繋がるのに、無しのときだけ繋がらないからオナガイしてみたの。
ありがと^^)ﾉｼ

**動け動けウゴウゴ２ちゃんねる** · NG

昔の /test/read.cgi?bbs=??????&key=??????????
形式でスレを見ようとすると error 2002 になる件

**動け動けウゴウゴ２ちゃんねる** · 05/02/03 21:00:55

>>125
で？

**動け動けウゴウゴ２ちゃんねる** · 05/02/03 21:08:27

昔の形式は廃止じゃなかったけ？

**動け動けウゴウゴ２ちゃんねる** · 05/02/03 21:52:11

http://qb5.2ch.net/test/read.cgi/operate/1104218992/

こっちのスレで出たやつだね。
結論からすると>>127

**動け動けウゴウゴ２ちゃんねる** · 05/02/03 22:05:15

古いログを読むときに面倒だから
bbs=とkey=だけでも実装して欲しいなー。
memoriesのread.cgiは旧仕様だから問題ないけど
過疎板だと結構古いスレが生きてたりするし。

**動け動けウゴウゴ２ちゃんねる** · 05/02/03 23:53:01

そのへんは専ブラ使えってことじゃないのかね？

**動け動けウゴウゴ２ちゃんねる** · 05/02/04 00:49:21

http://be.2ch.net/test/read.cgi/be/1106303763/
IEで見るともうぐちゃぐちゃ、Beとの兼ね合いで

**root▲ ★** · 05/02/04 16:30:51

memoriesの5.3Rへのバージョンアップ & read.cgi の mod_cgidso 化を
考えているわけですが、、、。

これを実現するには、旧形式をサポートしないと苦しいっすね。
さて、どうすべか。

**root▲ ★** · 05/02/04 16:31:24

旧形式を積極的にサポートしない理由って、なんかあるんでしたっけ。
それとも単に、面倒だからやってないんだっけか。

**動け動けウゴウゴ２ちゃんねる** · 05/02/04 16:37:45

>>133
たしかFOX ★が面倒だとか使われてないとかで……

旧形式用にsubread.cgi …等と言ってみるテスト

**動け動けウゴウゴ２ちゃんねる** · 05/02/04 16:45:20

>>134
旧形式だったかどうかの判定って難しいですかね

**動け動けウゴウゴ２ちゃんねる** · NG

QUERY_STRING を見る処理をとっぱらっちゃってるんでしょ

**動け動けウゴウゴ２ちゃんねる** · 05/02/04 17:15:09

>>133
■ read.cgi(DSO味)の巻 part1 (2004/12/01-)
http://dso.2ch.net/test/read.cgi/myanmar/1101888913/27+59+61

この辺を見るに対応する予定は一応あるようです。

◆cZfSunOs.U · 05/02/05 00:53:24

mod_rewrite でできないこともないかな......

RewriteEngine On
RewriteBase /test
RewriteCond %{QUERY_STRING} ^bbs=(\w+)&key=(\d+)(&st=(\d+))?(&to=(\d+))?(&(n)ofirst=true)?
RewriteRule ^(.*/?read\.cgi) $1/%1/%2/%4-%6%8? [R=permanent]

**root▲ ★** · 05/02/05 01:18:07

>>138
ひょー。

あとで、試してみるか、、、。

**root▲ ★** · 05/02/05 05:37:16

必死に Options +FollowSymLinks +SymLinksIfOwnerMatch って書いても、

Options FollowSymLinks or SymLinksIfOwnerMatch is off which implies that RewriteRule directive is forbidden: /home/ch2teri/public_html/test/read.cgi

と言われて、403 Forbiddenになりますね。
ううむ。

◆cZfSunOs.U · 05/02/05 10:09:15

>>140
　　　　/home/ch2teri/public_html/.htaccess
　　　　/home/ch2teri/public_html/test/.htaccess
の2つあって，下の方ので FollowSymLinks 等をクリアしてしまっているとか......？
ちなみに．>>138 のは下の方のに入れるのが前提になってまして，
もし上の方のに入れるなら RewriteBase は / にして下さい．

**root▲ ★** · 05/02/05 17:51:26

>>141
test/.htaccess がありました。で、設定したら動きました。すみませんです。

で、teri.2ch.net に試しに入れてみましたが、どうも2つ問題があるみたいです。

1)なんか余計な - がつくみたい。(mod_rewrite側の問題?)

☆ 質問でも雑談でもＯＫのスレッド２ ☆
http://teri.2ch.net/test/read.cgi?bbs=accuse&key=1000047608

が、

http://teri.2ch.net/test/read.cgi/accuse/1000047608/-

になります。

(続き)

**root▲ ★** · 05/02/05 17:52:59

(続き)

2)999999999以前の倉庫形式に対応していない。(read.cgiの問題)

curry鯖重すぎます。
http://teri.2ch.net/test/read.cgi?bbs=accuse&key=996593101

のように、999999999以前の倉庫だと「隊長！過去ログ倉庫で…」にならずに、
error 3001 - datが存在しません。削除されたかURL間違ってますよ。
になるようです。

これは、

・999999999以前の倉庫形式

curry鯖重すぎます。
http://teri.2ch.net/accuse/kako/996/996593101.html

・1000000000以降の倉庫形式

☆ 質問でも雑談でもＯＫのスレッド２ ☆
http://teri.2ch.net/accuse/kako/1000/10000/1000047608.html

の、ディレクトリ構造が違うためかなと。

これからちとおでかけなので、teriの設定はいったん元に戻しておきます。

**ピロリ** · 05/02/05 18:41:13

私の意見

何もしないのが吉かと、

**root▲ ★** · 05/02/05 20:48:38

今memoriesに入っているやつは当分、旧版のread.cgiで動かすってことすか。
まぁ、特に困ってないですしね。
優先度はそんなに高くないかなと。

◆cZfSunOs.U · 05/02/06 00:08:02

>>142
>1)なんか余計な - がつくみたい。(mod_rewrite側の問題?)

まぁ mod_rewrite を使った対処は苦肉の策ではありますからね．
- があっても一応表示されるならそれでいいか，って感じではあったんですが，
他にも QUERY_STRING でのパラメータの並び順が変わると対応できないとか
限界はあったりします．結論的に >>144-145 のような方針ならそれもいいかな，と．

**ピロリ** · 05/02/10 13:49:19

と思ったけど
過去ログ用だから「過去ログにありました」って表示するだけだったりする?

**root▲ ★** · 05/02/10 13:53:28

>>147
…ですね。あるいは「過去ログ倉庫にもありませんでした」を表示で。

**ピロリ** · 05/02/10 13:57:09

ちなみに
teri だけ実験用に .so 仕様の read.cgi にする事出来ますか?

**root▲ ★** · 05/02/10 13:58:42

>>149
できます。やっておきましょ。
amd64なので、live8から持ってきてくださいです。

**ピロリ** · 05/02/10 13:59:40

はいはいー

**ピロリ** · 05/02/10 14:00:51

read.cgi@teri は当面工事中ということで

**root▲ ★** · 05/02/10 14:04:37

done. >>150

動作確認用。IE without 壷で。
↓
明日はどうなる？働け！ひろゆき　★Pａｒｔ25★
http://teri.2ch.net/test/read.cgi/accuse/1000216844/

**ピロリ** · 05/02/10 14:08:58

http://teri.2ch.net/test/read.cgi/accuse/1000216844/
これはこの動作でいいのかな?

http://teri.2ch.net/test/read.cgi?bbs=accuse&key=996593101
あとはこれをごにょごにょすればいいのかな?

**root▲ ★** · 05/02/10 14:12:53

>>154
> これはこの動作でいいのかな?

よいと思います。

> あとはこれをごにょごにょすればいいのかな?

はい、あと念のためですが、

http://teri.2ch.net/test/read.cgi?bbs=accuse&key=1000216844

もですね。
1000000000以上になってからもしばらく旧形式は使われていたんで。

**ピロリ** · 05/02/10 14:14:47

旧形式というと

<> でないやつか、、、
頭がクリアなときにでもがんばって見ます
(最近は monce a month だったり)

**root▲ ★** · 05/02/10 14:20:21

>>156
おぉ。「teriタイプ」でないやつですね。
そういうことじゃなくて、PATH_INFOじゃないやつってつもりでした。

# このへんは私もあとづけ知識なんで、詳しくないのです。

**ピロリ** · 05/02/11 15:45:54

まずは
2002をなんとかしてみた
http://teri.2ch.net/test/read.cgi?bbs=accuse&key=1000216844

これでok か?

あと <> で無いやつのURL見つけたら
出てきたときに何とかする方向で

**ピロリ** · 05/02/11 16:32:54

http://teri.2ch.net/test/read.cgi?bbs=accuse&key=996593101

これはまだ動いていないようです

9xxx 代に対応せねば、

**動け動けウゴウゴ２ちゃんねる** · 05/02/11 16:44:04

>>158
bbs= と key= を逆にすると
http://teri.2ch.net/test/read.cgi?key=1000216844&bbs=accuse

２ちゃんねる error 8102
error 8102 番のメッセージはなににすればいい?

**ピロリ** · 05/02/11 16:46:30

おおっ

**ピロリ** · 05/02/11 16:49:24

なおしたー

**動け動けウゴウゴ２ちゃんねる** · 05/02/12 17:02:09

死んだ？

**動け動けウゴウゴ２ちゃんねる** · 05/02/12 22:25:12

やあ

**動け動けウゴウゴ２ちゃんねる** · 05/02/12 22:26:29

っこんにちわ

さようなら

**動け動けウゴウゴ２ちゃんねる** · 05/02/12 22:27:03

開発頑張って下さい。
応援してます。

**動け動けウゴウゴ２ちゃんねる** · 05/02/16 21:35:55

レスアンカーの飛び先がスレ移転前のアドレスのままになる不具合
http://comic5.2ch.net/test/read.cgi/anichara/1100865159/

**某47** ◆ap/yuix/tw · 05/02/16 22:08:02

>>167
なにがどう移転したのか分かりません

**動け動けウゴウゴ２ちゃんねる** · 05/02/16 22:23:18

ブラウザを立ち上げなおしてみてください。←これうざい

**動け動けウゴウゴ２ちゃんねる** · 05/02/16 22:29:12

エロイのは排除されてるんだっけ

**動け動けウゴウゴ２ちゃんねる** · 05/02/16 22:30:26

誤爆(*´ω｀*)

**動け動けウゴウゴ２ちゃんねる** · 05/02/17 22:57:20

>>168
>1のアンカー飛び先がスレ移転前の板のアドレスのまま
http://comic5.2ch.net/test/read.cgi/anichara2/1100865159/2-10

**某47** ◆ap/yuix/tw · 05/02/17 23:38:26

>>172
ああ、なるほど。わかりました。

◎datファイルの記述
<a href="../test/read.cgi/anichara2/1100865159/2-10" target="_blank">>>2-10</a>

◎read.cgiの出力するHTMLの記述
<a href="../test/read.cgi/anichara2/1100865159/2-10" target="_blank">>>2-10</a>

read.cgiでは全く手を加えていないわけです。ということはbbs.cgiなんですが、これって対応できるのかなあ

**動け動けウゴウゴ２ちゃんねる** · 05/02/18 16:59:06

datに書いちゃってるんだ

あと話し変わるけど950超えと1000越えの文字背景色変えて欲しいと思ったり

**動け動けウゴウゴ２ちゃんねる** · 05/02/19 06:21:16

携帯→2ch運用情報スレッド16
http://qb5.2ch.net/test/read.cgi/operate/1106813751/655-
↑この問題read.cgiも対応しないですか。

**動け動けウゴウゴ２ちゃんねる** · 05/02/19 11:48:10

以前のバージョンは、この手の問題はほぼ全てつぶしてあったんだけどね

**動け動けウゴウゴ２ちゃんねる** · 05/02/21 03:20:20

URLのハイパーリンクの際”｜”が認識されない不具合
http://qb5.2ch.net/test/read.cgi/operate/1108435073/392

**root▲ ★** · 05/02/21 06:03:05

>>177
RFC 3986 的に | ってURIに使えるんだっけか。

**動け動けウゴウゴ２ちゃんねる** · 05/02/21 09:02:56

>>178
できないんなら「%7C」へ変換してしまえばすむ話かと

**動け動けウゴウゴ２ちゃんねる** · NG

いや、しちゃまずかろう

**ピロリ** · 05/02/21 18:18:03

なんか変なの?

◆cZfSunOs.U · 05/02/22 13:49:07

off-topic ですが......

http://qb5.2ch.net/test/read.cgi/operate/1087199303/488-490n
>488 名前： FOX ★ 投稿日： 05/01/03 23:08:41 ID:???
>　　ちなみに modcgi_dso のホームページってどこなんですか? >>485
>　　リンクしようかと、
>
>489 名前： ◆cZfSunOs.U 投稿日： 05/01/03 23:12:22 ID:yt/ZsWUR
>　　>>488 現状ではないです．作るなら 2ch Wiki あたりにとか......
>
>490 名前： FOX ★ 投稿日： 05/01/03 23:16:50 ID:???
>　　りょうかいですー
>　　static なページを作ってそこにリンクしておこう
>　　奮戦気あたりをぼちぼち書いて、

ってことでしたが，未だ

http://server.maido3.com/dso/
>準備中。。。

なので，当方で作ってみますた．

http://sunos.saita.ma/mod_cgidso.html
http://sunos.saita.ma/2ch-cgi-lw.html

**動け動けウゴウゴ２ちゃんねる** · 05/02/22 16:56:41

>>182
乙です。

というわけでwiki改変しますー

**動け動けウゴウゴ２ちゃんねる** · 05/02/22 17:08:11

>>183
まちがってbbs.cgiを先にやってしまいました。
編集ページが満杯なのでしばしお待ちをw

**動け動けウゴウゴ２ちゃんねる** · 05/02/22 20:19:18

つ▲

ｺﾞﾒﾝﾅｻｲ冗談です

**動け動けウゴウゴ２ちゃんねる** · 05/02/23 02:32:28

一番下の所の「DSO(Dynamic Shared Object)」のリンクは変更しないの？

**root▲ ★** · 05/02/23 02:49:10

>>182
おぉー、簡潔かつすばらしいです。

◆cZfSunOs.U · 05/02/23 07:56:37

まぁ，リンクの変更はよろしければお願いします，ということで......

で，こういう形での Web 公開に併せてモジュールのコード見直しも行ったんですが，
mod_cgidso では今まで dso_main() からの戻り値を単純に捨てていたのを
意味を持たせるように変更しました．あまり大きな変更ではないので
直ちにではなくてもいいですが，Apache のバージョンアップなどの際に
ついでに mod_cgidso の方も更新をお願いします．

で，その変更に伴う影響ですが，dso_main() からの戻り値が 0 である限り
挙動に変化はありません．もっとも，0 という数値を直接指定ではなく

return OK;

のように，OK というマクロ定義を用いるようにしてもらった方がいいですが．
一方，例えば http://dso.2ch.net/test/read.cgi/myanmar/1101888913/54
で言われているようなリダイレクトをする際には

apr_table_setn(r->headers_out, "Location", "/new-URL/");
return HTTP_MOVED_PERMANENTLY;

のように行えるようになる，ということです．

**ピロリ** · 05/02/23 13:32:02

おおっ

**動け動けウゴウゴ２ちゃんねる** · 05/02/23 13:48:01

>>189
＊「あたらしい　モジュールを　いれますか？

→はい
　いいえ

**root▲ ★** · 05/02/23 17:11:39

>>188
どもです。あのページから最新版とれるんでしたっけ。

**動け動けウゴウゴ２ちゃんねる** · 05/02/23 17:31:00

>>191
dsoページの一番下にありますよー

**動け動けウゴウゴ２ちゃんねる** · 05/02/23 19:40:44

read.cgiとかをオープンソース化してほすぃ。。。

◆cZfSunOs.U · 05/02/23 20:30:00

>>191 どもです．192 さん仰せのように取れますです．

**root▲ ★** · 05/02/26 23:19:00

というわけで、memories関連はこちらで。

■ read.cgi@memories のDSO化 (part1)
http://qb5.2ch.net/test/read.cgi/operate/1109427188/

**ピロリ** · 05/03/14 00:35:55

read.cgi@dso を LA(LOad Average)=1.0 以上の場合
read.cgi を「人大杉」表示にした

これでどれくらいの効果があるかわからないがテストしてみよう。
1.0 の値は 10.0 くらいが妥当か? @banana
でも tiger もあるしな・・・

read.cgi 内で Banana/Tiger/Cobra の区別はどうやって見るんだ?

**root▲ ★** · 05/03/14 00:39:45

移動、了解。

今、LA=1以上だと人大杉すか。

**ピロリ** · 05/03/14 00:39:55

Tiger/Banana/Cobra の自動判定は
そのうちということで
今回はソースに埋め込んでみよう

Tiger/Cobra = 20.00
Banana = 5.00

あたりがリミッタかな?

**動け動けウゴウゴ２ちゃんねる** · 05/03/14 00:42:55

　　 , 　＿ﾉ）
　 γ∞γ~ 　＼　　ﾊﾆｬﾝ
　　|　 /　从从) ）
　ヽ　| |　l　 l |〃　　／￣￣￣￣￣￣￣￣￣￣￣￣
　　｀从ﾊ~_ーノ） ∬＜　ピロリさん、rootさん、お茶どぞー♪
　　　つ旦__))つ旦　＼＿＿＿＿＿＿＿＿_＿＿＿＿

**ピロリ** · 05/03/14 00:49:33

実験するです

banana = 4.0
tiger/cobra = 10.00

ではじめます

**root▲ ★** · 05/03/14 00:50:05

>>198
ex7(tiger503)とlive系(oyster901 = live8 / tiger507 = live16は実験中なので、リミッターなしをきぼんぬ。
あとは、そんなところだと思います。

**root▲ ★** · 05/03/14 00:50:30

>>200
それは、さすがに少なすぎっす、、、。

**ピロリ** · 05/03/14 00:52:34

少なくしないと実験にならないです
これでも今の時間だとでれも人大杉にならないような

実際に負荷が上がって
人大杉になって自力で解除になる

というのが実現できたら意味のあることだったと言うことですなぁ

**root▲ ★** · 05/03/14 00:54:31

>>203
ふむ。

さすがにex7は、人大杉になったようで。

**root▲ ★** · 05/03/14 00:55:03

効果絶大ですね。@ ex7
load averages: 11.90, 23.87, 27.27

**ピロリ** · 05/03/14 00:56:15

ほほぅ

ホントに効果絶大だ、、、
私も ex7 観察してたっす

**root▲ ★** · 05/03/14 00:56:42

NTVのニートの番組が終わったせいかもしれないけど、今10切ったですね。@ ex7

load averages: 8.13, 19.76, 25.39

**root▲ ★** · 05/03/14 00:57:28

ってことは、読み手と書き手を分断できるだけで、軽く倍は出るってことすかね。

**ピロリ** · 05/03/14 01:02:38

>>208
さすがに予想は難しいなぁ

Banana 4.0
Tiger 20.0
実験サーバ(live16,ex7,live8) 200.0

にするっす

**root▲ ★** · 05/03/14 01:10:17

>>209
了解です。< 設定値

◆cZfSunOs.U · 05/03/14 08:45:04

Tiger / Banana / Cobra の自動判定より，httpd.conf か .htaccess で

SetEnv ReadCgiLoadAvgLimit 10

のように設定するのが簡単で，設定変更も柔軟にできるのではないでしょうか．
read.cgi ではこのような感じで．

double loadavg;
const char *loadavglimit;

getloadavg(&loadavg, 1);
loadavglimit = apr_table_get(r->subprocess_env, "ReadCgiLoadAvgLimit");
if (loadavglimit && loadavg >= atof(loadavglimit)) {
apr_table_setn(r->err_headers_out, "X-Load-Avg",
apr_psprintf(r->pool, "%.2f (Limit = %s)", loadavg, loadavglimit));
return HTTP_SERVICE_UNAVAILABLE;
}

あと，read.cgi そのものを軽くするということでは，Last-Modified チェック + mod_mem_cache
http://dso.2ch.net/test/read.cgi/myanmar/1101888913/64-68n
が実運用でどの程度効果があるかも見てみたいところです．

**ピロリ** · 05/03/14 22:06:44

>>211
そですねぇ
そんな感じにしますかねぇ

music4 の負荷が順調に上がってきている
発動するかも、

**ピロリ** · 05/03/14 23:40:29

某板がうるさいので
ex7 , live16 も再導入

**ピロリ** · 05/03/14 23:41:22

閾値 12

**動け動けウゴウゴ２ちゃんねる** · 05/03/14 23:45:24

>>213-214
お疲れさまです・・・

**root▲ ★** · 05/03/15 00:13:02

誘導されてきました。そういうことでしたか。

新たな試みを実施するため、ex7のread.cgiリミッターを一時的にはずしました。

httpd => speedy => speedy_backendだった起動方法を、
httpd => speedy_backendの直接起動に変更。

こっちでやっています。
スレタイを、ex7総合実験スレ、とでもすればよかったかも。

【実験】ミニ雪だるま作戦―ex7で3/8 3:10あたりから実験はじめます
http://qb5.2ch.net/test/read.cgi/operate/1110218877/

**root▲ ★** · NG

移転に伴い、read.cgi の自動人大杉装置の閾値を、

live16 live20 ex10 : LA=200 (実験用、事実上ノーリミット)
他のtigerサーバ : LA=20
bananaサーバ : LA=4

に再設定した。