read.cgi再開発スレ

**ｒｅｆｆｉ@報告人 ★** · 04/06/14 16:48

稼働させると問題が多発しているread.cgiを再開発等を話しあうスレッド
です。
アイデア等がありましたらこちらへどうぞ

**動け動けウゴウゴ２ちゃんねる** · 04/06/15 09:26

現行のread.cgiがどのような動作をしているのか、どこかで解説されてないかな？

現在の動作が分からないと、設計もできないんでないかい？

**▲:/usr/local/bin/ch2 -o i686** ◆P8fXJj6wwo · 04/06/15 11:51

>>33
改造コピペネタでつか？
>>8
なおしときますた。

**考えるお馬●さん** ◆paperNoNNo · 04/06/15 22:29

>>30
dat読み込みから見直すんならbbs.cgiの方まで見直さなきゃいけないと思うんだけど
そこまで大改造はしないと思う。

banana鯖用のスリム化は別にやらなくても大丈夫らしい（>>9-10）だから
やることはAMD64特化版read.cgiってやつだけかな？

**考えるお馬●さん** ◆paperNoNNo · 04/06/15 23:07

>>34
Perlで似せてread.cgi作った時は大体こんな感じの処理が必要だったけど。

各種設定
　背景色等の設定用にSETTING>TXT読込
　クッキーの読込

エラー判定
　datファイル読込・存在するかの判定
　無い場合は過去ログ倉庫に存在するかの判定

ヘッダ部出力
　datファイルのレス数を取得
　レス番の指定がある場合は出力範囲を算出
　ヘッダ部の100レス単位リンクの出力範囲を算出

レス部出力
　>1を表示するかの判定
　レスの[ここ壊れてます]判定
　メール欄がある場合の名前欄リンク化
　URL文字列のリンク化
　外部サイトのime.nuリンク補正
　レスアンカの補正
　長文省略判定

フッタ部出力
　datファイルのサイズを取得
　新着レスの表示／続きを読む判定
　前100、後100 表示判定

フォーム編集
　timeパラメータ用に時刻取得

**動け動けウゴウゴ２ちゃんねる** · 04/06/15 23:13

>37
解説ありがとん。なるほど、結構単純なようでややこしそうな処理だねぇ。

**動け動けウゴウゴ２ちゃんねる** · 04/06/16 07:29

>>36
#ifdef amd64
なんちゃら
#endif

#ifdef ia32
どんちゃら
#endif

とでもできませんかね。コンパイルがmakeを使用するようになっていればの話ですが。

**動け動けウゴウゴ２ちゃんねる** · 04/06/16 13:25

２ちゃんねるはガリガリに最適化されたmod_2chで動いてると思い込んでいただけに
ショックだ

**▲:/usr/local/bin/ch2 -o i686** ◆P8fXJj6wwo · 04/06/16 14:05

>>40
apache moduleの話は出てきては立ち消えになっているんですがねぇ。
どうなることやら。

**未承諾広告※** ◆TWARamEjuA · 04/06/16 14:47

mod_isp2ch なんてのはあるみたいですけどねぇ。
ひとまず、AMD64 でも安定して動く read.cgi でしょうか。
それ以上のことは、掲示板システム全体の再構築が必要かと思いますので。

**動け動けウゴウゴ２ちゃんねる** · 04/06/16 14:54

#include <stdio.h>
#include <stdlib.h>

int main(int argc, char *argv[])
{
printf(
"Content-Type: text/html; charset=Shift_JIS\n\n"
"<html><head><title>もうずっと人大杉</title></head>"
"<body><h1>もうずっと人大杉</h1></body></html>\n"
);
return EXIT_SUCCESS;
}

**▲:/usr/local/bin/ch2 -o i686** ◆P8fXJj6wwo · 04/06/16 15:26

>>42
では関連で。

bbs.cgi再開発プロジェクト 3
http://qb5.2ch.net/test/read.cgi/operate/1076666901/l50

**動け動けウゴウゴ２ちゃんねる** · 04/06/16 22:35

昔、UNIX板の有志が書いてたread.cgiのソースって、今も公開されてるんだっけ？

**動け動けウゴウゴ２ちゃんねる** · 04/06/16 23:39

だいぶVerが古くない？ソレ

**7M.** ◆dq7M./4Uw. · 04/06/17 00:49

古かったと思う、>45-46
最新のは未公開、多分、

**考えるお馬●さん** ◆paperNoNNo · 04/06/17 01:08

とりあえずborlandのコンパイラを落として、暇を見つけつつ
基本構造のおさらいから始めてて、ふと思った。

これ、それなりの形が作れるようになった頃には
とっくに開発終了してるんじゃなかろうか。。

頑張れ、俺。

**root ★** · 04/06/17 12:04

>>16 で言及した、
mmap()を使用しないread.cgiをgame6サーバに実験的に入れてみた。
これでしばらく実験してみるということで。

**動け動けウゴウゴ２ちゃんねる** · 04/06/17 21:32

とりあえず乙

◆cZfSunOs.U · 04/06/17 23:45

32-bit 環境と 64-bit 環境での違いっていっても，変数サイズの違いぐらいで，
そんなに変わるわけでもないけど．って，それがこける原因じゃないよな......？
long とかポインタのサイズに依存するような処理って入ってたかな......？

**root ★** · 04/06/18 03:43

20日以上動いていたgame6が、read.cgiを上げたら半日で死にました。
mmap()ではなかったと。

ということで、
live8(read.cgiを動かしている)とcomic4(携帯の負荷に耐えている)で実績のある、
以下の設定を追加してみた。

(従来)
<IfModule prefork.c>
StartServers 64
MinSpareServers 5
MaxSpareServers 32
ServerLimit 256
MaxClients 256
MaxRequestsPerChild 0
</IfModule>

(現在)
<IfModule prefork.c>
StartServers 64
MinSpareServers 5
MaxSpareServers 32
ServerLimit 256
MaxClients 256
MaxRequestsPerChild 100000 <= 変更
MaxMemFree 2048 <= 追加
</IfModule>

◆cZfSunOs.U · 04/06/18 07:04

Re: huge memory leak in 2.0.x
http://www.mail-archive.com/dev@httpd.apache.org/msg21175.html

ということで，2.0.x には CGI を呼んだ際にメモリリークする問題があるそうで，
とりあえずは MaxRequestsPerChild / MaxMemFree での対処は
妥当なところなんでしょうけど，AMD64 以外ではこけるというところまでは
行ってなかったんですよね......？

**root ★** · 04/06/18 12:15

>>53
どうもです。CGIを呼ぶとメモリリークするのですか。

かつてのumaサーバ(Xeon 2.4G dual/メモリ2G/FreeBSD 4.x)では特に問題なかったですね。
FreeBSD 4.xと5.xの違いか、amd64とi386の違いか。

**root ★** · 04/06/18 12:21

ということで、read.cgiの現在のソースを
出来る範囲でもうすこしまじめにあたってみるか。

**root ★** · 04/06/18 12:24

…ということで、いったん退却。

【Project peko】2ch特化型サーバ構築作戦 Part13
http://qb5.2ch.net/test/read.cgi/operate/1085678587/963
963 名前：root ★[sage] 投稿日：04/06/18 11:54 ID:???
ということで、リモートからデバッガに落とせない状態なので、
いったんgame6のread.cgiを止めます。

**動け動けウゴウゴ２ちゃんねる** · 04/06/18 15:51

既出？
ttp://qb5.2ch.net/test/read.cgi/operate/1081010089/631

◆HETAREzfq. · 04/06/18 16:24

>>57
hardをどうにかする、というのは基本的にあきらめたみたいだよ。
（これから新規に買うときは発注条件をなんとかする等で気をつけて欲しいけどね）
OSもどうなんだろう？live8は今の所問題ないし。。。

今は、opteron・apache・OS等の禁忌事項にread.cgiの処理が当てはまってるかどうかとか
そういうのを調べてみる時期なんじゃないのかなぁ？？
（ソフトのことはよくわかりませんが）

**▲:/usr/local/bin/ch2 -o i686** ◆P8fXJj6wwo · 04/06/18 16:28

>>58
ていうか、現状何が問題なんでしょ。
read.cgiに限らず。

◆HETAREzfq. · 04/06/18 16:56

>>59
わかる人が見ないことにはそのへんすらわからないだろうね。
ちなみに漏れは見てもわからんのは確実。がはは。

◆cZfSunOs.U · 04/06/18 20:07

オープンソースで改良作業が行われていた当時の read.cgi ソースはこちら．
http://gedoh.org/aki/2ch/current/bbs/

どこかで地雷を踏んでるのかねぇ......

**root ★** · 04/06/18 21:53

今まで「これをやると落ちる or 落ちる確率が間違いなくアップする」ものとしては、

・read.cgi
・fox.cgi

かなと。

**動け動けウゴウゴ２ちゃんねる** · 04/06/18 23:43

つーか、言語なんすか？perl?
Cなら協力できそうにないなぁ。。

**みなわ** ◆oiktGSoBlQ · 04/06/19 02:10

>61
うがー。malloc/free/memmset/memcpy/memcmp/memchrが。

**動け動けウゴウゴ２ちゃんねる** · 04/06/19 02:22

もうずっと人大杉へ飛ばされる板のスレを見たいのですけど、
.datファイルのレスX番から50個のレスを読み込むにはどうしたらいいのでしょうか？
全部読み込まないと駄目なのですか？

**動け動けウゴウゴ２ちゃんねる** · 04/06/19 02:33

>>65
質問・雑談スレ43＠運用情報板
http://qb5.2ch.net/test/read.cgi/operate/1087488419/

**動け動けウゴウゴ２ちゃんねる** · 04/06/19 18:02

ここ見れ
http://makimo.to

**動け動けウゴウゴ２ちゃんねる** · 04/06/20 19:22

なーんで負荷が高いsports8とかで問題無く動いているread.cgiが
game6になった途端くたばるん？
最新型マザーボードが狂ってるんか？

**動け動けウゴウゴ２ちゃんねる** · 04/06/21 19:15

面白い話題を発見しますた。
http://lists.freebsd.org/pipermail/freebsd-current/2004-June/029521.html

◆cZfSunOs.U · 04/06/22 07:32

公開版ソースでは MAP_PRIVATE で mmap() してるみたいですが......
見たところ，マッピングされた領域に書き込みを行っていないようなので，
MAP_SHARED でいいのではないかと．mmap() 本来の仕様では
マッピングされた領域に書き込みを行わない限り MAP_SHARED も
MAP_PRIVATE も同じ挙動を示すはずですが，このあたりに地雷があるとすると
どうなるかわからないので．ちなみに，Apache(APR) では MAP_SHARED
で mmap() が実行されます．

>>69 ふむ，予想に反して mmap() が意外に遅いと......で，mmap() に
改善の余地があるのかないのか......という話のようですね．
とはいえ，カーネル時間の消費は mmap() の方が圧倒的に少ないので，
単一のプロセスをぶん回すような用途ならともかく，多数のプロセスを
同時実行するような用途ならその状況でも mmap() に利があるかとは思いますが．

**動け動けウゴウゴ２ちゃんねる** · 04/07/10 23:55

あい

**動け動けウゴウゴ２ちゃんねる** · 04/07/11 00:41

あげ

**キッコーマソ系スレ支持者** · 04/07/11 12:41

スレ立て時に強制sageを指定できるようにきぼんぬ。
そうしてread.cgi ver8.00はこれで決まり。

**名無しさん＠そうだ選挙に行こう** · 04/07/11 12:44

自分で書いてこんなのどうですかって持ってこないと話にならんでしょ

**7M.** ◆dq7M./4Uw. · 04/07/11 16:01

大体それreadじゃなくってbbsの方の範疇だし。

**ヒロヒロ** · 04/07/25 03:09

ちょっとCをかじってたので協力できたら…
なんて考えていましたがはっきりいってわかんね～（笑

mmap()って何なんでしょうか？
mallocとかまでしか着いていけませんでした

http://www.ebimemo.net/diary/?date=200303

**動け動けウゴウゴ２ちゃんねる** · 04/07/25 04:29

mmap()の意味も見つけられない人は、「ちょっとCをかじってた」とは言わない
ttp://www.google.com/search?lr=lang_ja&ie=Shift_JIS&oe=Shift_JIS&q=mmap

**動け動けウゴウゴ２ちゃんねる** · 04/07/25 06:57

ていうかこの期に及んで
「必要なのはC言語の知識というよりは高負荷環境を捌く知恵と経験」
ということに気づけなかった時点でｲﾗﾈ

**動け動けウゴウゴ２ちゃんねる** · 04/07/26 15:44

前live5鯖でやってた
h ttp://鯖.2ch.net/板/read/dat.html
例)http://live5.2ch.net/livetbs/read/1074855449.html
あれはどうなった？

**▲:/usr/local/bin/ch2 -o i686** ◆P8fXJj6wwo · 04/07/26 16:19

>>78
C版の開発はチューン次第ではメモリ不足の解消にもつながるでしょう
一般的に

size(perllccバイナリ)>>size(Cコードバイナリ)

だし

**動け動けウゴウゴ２ちゃんねる** · 04/07/26 17:49

>>78はCを否定しているのではないと思われ

◆cZfSunOs.U · 04/07/30 19:00

ちょいとネタ振り．

mod_cgidso http://jbbs.livedoor.com/bbs/read.cgi/computer/2095/1051177958/129
　　　　外部 CGI を実行ファイルではなく共有オブジェクトで作成し，fork(),exec() の
　　　　オーバヘッドを解消するもの．CGI そのものをモジュール化すると，
　　　　プログラム変更のたびにモジュール入れ替えのため Apache を再起動しなければ
　　　　ならないが，これなら単に外部 CGI の共有オブジェクトの入れ替えだけで済む．

で，以前ソースをうpしていた鯖は現在亡くなってしまっていますが，

　　　　mod_cgidso.c　　（モジュールソース）
　　　　dso-example.c　　（これを利用した共有オブジェクト型 CGI のサンプル）
　　　　read.tar.bz2　　（>>61 のソースを基にこのモジュールに対応させたもの）

どこか適当な場所があればうpします......

**root ★** · 04/07/30 20:31

>>82
お、そっか、これ、改めていいかも。
どこかにうｐしてほしいなと。

◆cZfSunOs.U · 04/07/30 21:35

>>83 とりあえず臨時自宅鯖でうpしますた．

http://203.205.158.203/jikken/mod_cgidso.c　　（モジュールソース）
http://203.205.158.203/jikken/dso-example.c　　（これを利用した共有オブジェクト型 CGI のサンプル）
http://203.205.158.203/jikken/read.tar.bz2　　（>>61 のソースを基にこのモジュールに対応させたもの）

DHCP の上 Dynamic DNS 使うほど本格運用するつもりもないんで，
IP 変わったりした際はご容赦を......

**root ★** · 04/07/31 01:09

>>84
ping とおらなくて、port 80も応答しないっす。

**root ★** · 04/07/31 01:23

再度やったらとれたです。どうも。

◆cZfSunOs.U · 04/08/20 06:58

【Project peko】スレの方は OS の話が進んでいるようなので，こちらで．

http://qb5.2ch.net/test/read.cgi/operate/1087666806/914n
>で、どうも、プロセスが多く起動・終了されるマシンで、落ちる可能性が上がるように見える。

ということなら，mod_cgidso で何とかなるのかな，という気もしますが......

**動け動けウゴウゴ２ちゃんねる** · 04/09/02 12:34

みゅ

**test** · 04/09/12 18:10:58

aaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaa

04/09/29 16:27:06

**動け動けウゴウゴ２ちゃんねる** · 04/10/07 16:10:45

保守

**動け動けウゴウゴ２ちゃんねる** · 04/10/12 19:48:41

http://piza.2ch.net/sakud/kako/957/957785425.html
↑このスレをread.cgiでみると全レス[ここ壊れています]になる

http://piza.2ch.net/test/read.cgi/sakud/957785425/

**動け動けウゴウゴ２ちゃんねる** · 04/10/13 13:05:22

html化されているログをread.cgiで読めることは
もともと保証されていないのだから「仕様」でしょう

**ひろゆき＠どうやら管理人 ★** · 04/10/29 18:08:44

なにか問題あったら教えてくださいー。

**外野ｧｧﾝ** · 04/10/29 18:14:20

read.cgi ver7.31p (04/10/29)

**動け動けウゴウゴ２ちゃんねる** · 04/10/29 18:24:32

お、広告（？）が入ってる。

**root▲ ★** · 04/10/29 18:29:34

>>94
live8 (AMD64)のread.cgiを7.31pに更新しました。
これから memories 上の各バーチャルホストのも更新します。

**動け動けウゴウゴ２ちゃんねる** · 04/10/29 18:29:43

■掲示板に戻る■ 関連ページ全部 1- 最新50 [PR] 新潟ガンバレ. [PR]

**外野ｧｧﾝ** · 04/10/29 18:30:48

sports2
read.cgi ver6.01p (02/04/12)

（つД｀）

**動け動けウゴウゴ２ちゃんねる** · 04/10/29 18:32:22

ﾜﾛﾀ

**ひろゆき＠どうやら管理人 ★** · 04/10/29 18:54:41

あ、7.33にかわりましたー。

**ひろゆき＠どうやら管理人 ★** · 04/10/29 18:54:58

これでほぼ確定かと。

**root▲ ★** · 04/10/29 19:03:49

>>101
了解です。

**動け動けウゴウゴ２ちゃんねる** · 04/10/29 19:06:38

右上の広告が激しくｳｻﾞｲです
終わったら早く消してください糞野郎（＾＾ｖ

**root▲ ★** · 04/10/29 19:09:37

live8 と memories の read.cgi を変えました。

**root▲ ★** · 04/10/29 19:13:20

read.cgi 効果は、すごいや。

**root▲ ★** · 04/10/29 19:13:41

あ、リンク貼り忘れた。

http://mumumu.mu/mrtg/mrtg-rrd.cgi/special/

**root▲ ★** · 04/10/29 19:14:33

というわけでこうなるとeq/eq2のピーク時の負荷がちと心配なんで、
やばければまたごそごそしてみるか。

**動け動けウゴウゴ２ちゃんねる** · 04/10/29 19:37:45

sports2は変えるなよ糞運営側が

**動け動けウゴウゴ２ちゃんねる** · 04/10/29 21:18:58

>109
×糞運営側が
○糞管理人が

他の人はタッチできませーん。

**root▲ ★** · 04/10/29 22:42:46

地震Wiki(eq2.maido3.com)は、何とかもちそうかな。
チューニングがよく効いている模様。

banana618% uptime
6:41AM up 3 days, 1:23, 1 user, load averages: 8.06, 12.48, 11.03

**動け動けウゴウゴ２ちゃんねる** · 04/10/30 02:26:35

ver7.33、ネットスケープ4.7で表示おかしいぞ

**ひろゆき＠どうやら管理人 ★** · 04/10/30 02:38:02

治し方がわからなければ、どうしようもなく。

**▲ 某ソレ511** · 04/10/30 02:51:24

追加した部分がおかしいのかなーと思ってhtmlのソース見てみたけど
よーわからんかったわー

**動け動けウゴウゴ２ちゃんねる** · 04/10/30 02:52:10

なんか珍しいスレが上がっているな

**動け動けウゴウゴ２ちゃんねる** · 04/10/30 03:06:00

広告消して
style=float:left;
style=float:right;
を削るとか良さげ

**動け動けウゴウゴ２ちゃんねる** · 04/10/30 03:12:24

<div style='width:100%; border-bottom:1px solid #888;'>
<span style=float:right;>[PR] (省略) [PR] </span>
<a href="../../../../operate/">■掲示板に戻る■ (省略) 最新50</a>
</div>

こうしる。

**動け動けウゴウゴ２ちゃんねる** · 04/10/30 03:18:08

↑<span style=float:left;>を消して、広告(<span style=float:right;>)を先にする

**動け動けウゴウゴ２ちゃんねる** · 04/10/30 06:55:55

ver7.32p、>112と同じくネスケ4.7で不具合あるみたいです。
マウス左ボタンおしっぱで範囲選択、色が反転するはずのあれ、、が、
なんでか、できません。
（ver7.33pでは、これはできるみたいです）
かといって、どこをどうしていいのかはわかりませんけど、
一応、報告まで。

**未承諾広告※** ◆TWARamEjuA · 04/10/30 07:42:39

floatにする理由が見あたらないかも♪
見た目がどのようになって欲しいかを画像で示して貰えたら、広告枠のHTMLパーツを描いてみますけれども。。。

**動け動けウゴウゴ２ちゃんねる** · 04/10/30 08:22:28

Mac版IE5.17でも表示おかしいです
(赤字のタイトルがヘンな位置に)

マカですみません

◆cZfSunOs.U · 04/10/30 10:24:02

というか，float 要素は width 指定が必須ではなかったでしたっけ？
まぁ，どちらにせよ古いブラウザだと CSS 対応がちゃんとしてなかったりしますが．

**ひろゆき＠どうやら管理人 ★** · 04/10/30 10:34:53

うわーんよくわからないので、htmlで適当につくってあげてもらえると分かりやすいですー。

**動け動けウゴウゴ２ちゃんねる** · 04/10/30 10:54:50

WinIEでしかみれないHTMLはやめてくれ。
W3Cに準拠したブラウザだと表示が崩れるんだ。
酷いページはページ全体が1行に収まって最悪に見難いんだ。

**動け動けウゴウゴ２ちゃんねる** · 04/10/30 11:12:27

ネスケでも、となるとCSSは使えないなぁ。
右寄せを諦めるか、TABLEでレイアウトするしかないかも。

**動け動けウゴウゴ２ちゃんねる** · 04/10/30 11:21:00

>117のでネスケ4.7は上手く表示されてる

**動け動けウゴウゴ２ちゃんねる** · 04/10/30 11:56:57

<font size=+1 color=red style="clear:both;">たいとる</font>
　　　　　　　　　　　　　　~~~~~~~~~~~~~~~~
追加でいいんじゃ

◆cZfSunOs.U · 04/10/30 12:08:48

こちらも，>>117 ので一応ネスケ 4.78，Mozilla 1.7.3 で正常に表示されます．
ただ......やはり CSS としては float 要素には width は必須のようで
　　　　http://www.w3.org/TR/REC-CSS2/visuren.html#floats
しかし，どれほどの width がちょうどいいのかってのは難しいところですね．
個別の PR 文ごとに適当に指定するよりしょうがないですかね......

**▲:/usr/local/bin/ch2 -o i686** ◆P8fXJj6wwo · 04/10/30 12:19:09

というか、何をどーしたのかがよーわかりませんが。
どなたか教えて。

**動け動けウゴウゴ２ちゃんねる** · 04/10/30 12:33:09

read.cgiのスレ＝IEで見ろ

04/10/30 12:39:43

つうかNN4.7のことなんかわすれろ
それかテーブル使え

**▲:/usr/local/bin/ch2 -o i686** ◆P8fXJj6wwo · 04/10/30 13:05:31

>>130
なるほど・・・

[PR] 新潟ガンバレ. [PR]

なんでガンガレじゃないんだろw

**動け動けウゴウゴ２ちゃんねる** · 04/10/30 15:52:27

CSS使って各種UAで表示確認するより
TABLEにしたほうが手間かからないような

<table><tr><td>■掲示板に戻る■</a>  <a href=l50>最新50</a><td align=right>[PR] <a href=http://eq.maido3.com/>;新潟ガンバレ!</a> [PR]</table>