read.cgi再開発スレ

**ｒｅｆｆｉ@報告人 ★** · 04/06/14 16:48

稼働させると問題が多発しているread.cgiを再開発等を話しあうスレッド
です。
アイデア等がありましたらこちらへどうぞ

◆cZfSunOs.U · 05/01/03 22:42:16

>>476
>dso を使った場合。　read.cgi のプロセスは複数起動される。

read.cgi は httpd プロセスと同一メモリ空間に読み込まれるので，
read.cgi そのもののプロセスは起動されません．httpd プロセスが複数なら
read.cgi（が読み込まれている）プロセスも複数ということにはなります．

>何個起動されているかは知ることが出来るがコントロールする事は出来ない。

httpd プロセスをコントロールすることが即 read.cgi（が読み込まれている）
プロセスのコントロールということになります．

>read.cgiプロセス間に相互に関連性はない。

相互の関連性というのが変数共有等を指しているのなら，
上の方で言われている通りですね．

◆ToT/VojxVY · 05/01/03 22:45:46

みゃんまーでテストしてきましたー。
最新レス番を指定すると全レスが表示されますよ。

**root▲ ★** · 05/01/03 22:46:47

read.cgiは完全にhttpdと同化して動く、ということですね。

つまり、prefork(現在の2chのサーバのhttpdの設定)でhttpdの最大数が768個なら、
768個までread.cgiが同時に動く(可能性がある)と。

**FOX ★** · 05/01/03 22:47:11

何回もすみません >>477

どうしますかねぇ

起動毎に広告定義ファイルを読まなくても良い方法。

**FOX ★** · 05/01/03 22:48:35

現在は　ソース埋め込みです。

>>479
live16 もdso化しようかと、

**root▲ ★** · 05/01/03 22:49:48

>>481
設定入れてきます。< live16

◆cZfSunOs.U · 05/01/03 22:49:56

>>480 とりあえず >>440-441 を参考に......

**FOX ★** · 05/01/03 22:51:59

その　プールとやらはどこにあるんですか?

見たところ　アパッチの中のあるメモリ領域のように感じましたが
read.cgi から作成/設定、設定されていたら読み出し
こんな感じですか?

◆cZfSunOs.U · 05/01/03 22:57:12

>>484 そういうことですね．

**root▲ ★** · 05/01/03 23:00:28

live16をdso化しました。
news19から持ってきたread.cgiを入れてあります。

**FOX ★** · 05/01/03 23:01:52

どもです　どもです　>>486

>>485
挑戦してみます。

**FOX ★** · 05/01/03 23:08:41

ちなみに modcgi_dso のホームページってどこなんですか? >>485
リンクしようかと、

◆cZfSunOs.U · 05/01/03 23:12:22

>>488 現状ではないです．作るなら 2ch Wiki あたりにとか......

**FOX ★** · 05/01/03 23:16:50

りょうかいですー
static なページを作ってそこにリンクしておこう
奮戦気あたりをぼちぼち書いて、

**FOX ★** · 05/01/03 23:18:59

typedef struct のところで
コンパイル時こんなエラーが、

read.c:10: error: syntax error before "apr_thread_rwlock_t"

何かヘッダーが足りないですか?

**FOX ★** · 05/01/03 23:23:18

あと、
#define AD_CHECK_INTERVAL 60

の 60 って単位は sec ですか?

◆cZfSunOs.U · 05/01/03 23:24:48

>>491 あ......thread サポートが有効でないとそのあたりが定義されませんね......
rwlock や mutex を使ってるところは

#if APR_HAS_THREADS
　　　　:
#endif

で囲ってしまうのがいいかと．

>>492 そうです．

**root▲ ★** · 05/01/03 23:28:33

threadサポートは(今のところ)入れてないです。< tiger/cobra
今のところこれでいきますが、将来worker MPMとか使う時は、どきどき、か。

でもSpeedyCGIもworker MPMには対応してないので、
その時にはまた別途、ってかんじかなと。

**FOX ★** · 05/01/03 23:29:49

それでやってみます

**FOX ★** · 05/01/03 23:41:47

質問ですじゃ

if (ad_pool->mtime)
ap_rwrite(ad_pool->m->mm, ad_pool->m->size, r);

この部分で実際に書いていると思うんですが、(>>441)
1) if (ad_pool->mtime) これはどんな意味なんですか?
2) 文字列はad_pool->m->mmに入っているから strcpy(保存.ad_pool->m->mm);
　　とかやって取って置けますか?

**FOX ★** · 05/01/03 23:42:55

ちなみに　コンパイルも通って
実際に文字列がファイルから取ってこれるところまではできました。
インターバルが 60 になっているかどうかの検証はしていません。

◆cZfSunOs.U · 05/01/03 23:52:44

>>497
1) 広告ファイルが存在しないなど読み込み不能の場合は ad_pool->mtime を
　　0 にしているので，そのチェックです．
2) できますが，strcpy するなら mmap する意味がなくなってしまうかと．
　　現状のコードは mmap された領域自体を保持するようにしています．
　　# もっとも，終端が '\0' である保証はないので strcpy より memcpy の方がいいですが．

**動け動けウゴウゴ２ちゃんねる** · 05/01/04 00:03:32

スレ開いたとき上部に出てくるリンクで、
「101-」から「1001-」に該当する部分がごっそり落ちてるんすけど。

**FOX ★** · 05/01/04 00:03:42

ふむふむ

必要なときに出すことにしまーす。

広告定義ファイルが更新されたら即広告も変化するということでいいのかしら?

◆cZfSunOs.U · 05/01/04 00:07:21

>>500 前回のチェックから AD_CHECK_INTERVAL 秒経過後のチェックで
ファイル更新が確認されれば広告も更新ということですね．

**FOX ★** · 05/01/04 00:08:25

うーむ

600 sec にして広告変更したらすぐ変わっちまったなぁ
毎回読んじゃっているのかしら?

◆cZfSunOs.U · 05/01/04 00:10:27

あと，ファイル更新の際は旧ファイルをいったん rm するか，
新しいファイルをいったん別ファイルで作成した上で mv するか，という手順が必要です．
mmap の性質上，旧ファイルをそのまま書き換えると SEGV でこける可能性があります．

◆cZfSunOs.U · 05/01/04 00:14:01

>>502 httpd プロセスが多数ある状況では，前回呼んだ時と同じ httpd プロセスで
処理してもらうってことにはなかなかならないと思うので，その確認をするなら
httpd プロセス数を絞らないと難しいかもです．

**root▲ ★** · 05/01/04 01:09:03

>>504
httpdのpidとかでチェックする、、、のかな。
でも、例えばlive8やlive16とかだと1280人もいるし。

◆cZfSunOs.U · 05/01/04 01:15:34

>>505 やるとすればそうなりますね．dso.2ch.net だけ一時的に数を絞ってみるとか......

**FOX ★** · 05/01/04 01:30:33

ファイルは管理人が必要なときに FTP で一気に
全サーバに配られる仕組みになっとります。

**root▲ ★** · 05/01/04 01:37:16

>>507
FTPでもrenameはできるので、
いったん read.cgi.new という名前で put して、
read.cgiにrenameするのがいいとおもわれますです。

**FOX ★** · 05/01/04 01:38:50

バッチというか書き方わからんす　

**FOX ★** · 05/01/04 01:39:46

Perl で FTP だったりするです。
現状までは書いたけど、それ以上は私の能力の限界だったり、、

◆cZfSunOs.U · 05/01/04 01:44:10

あっ......>>503 は広告ファイルのことを意図して書いたんですが，
dlopen() も OS 内部で mmap() しますから read.cgi 自体もそうですし，
その他のデータファイル等も CGI 等でオープン中に中身が変わると
やはり不都合が生じる可能性があるので，基本的にその他のファイルも含めて
>>508 のような手順を踏むのがいいかも知れませんね．

**root▲ ★** · 05/01/04 02:01:16

Net::FTP を使ってるなら、単にこれでいいのではと。

$ftp->put("read.cgi","read.cgi.new");
$ftp->rename("read.cgi.new","read.cgi");
$ftp->site("CHMOD","0755","read.cgi");

**動け動けウゴウゴ２ちゃんねる** · 05/01/04 02:04:43

リンクはー？？
リンクはどうなるんですか？

**FOX ★** · 05/01/04 02:25:32

たくさんあるですよ、、、

**動け動けウゴウゴ２ちゃんねる** · 05/01/04 02:46:07

リンクはなくなるの？
スレや他サイトの<a>タグが全然つかなくなってるんですけど

**FOX ★** · 05/01/04 03:07:30

ほぼ完成か?

**FOX ★** · 05/01/04 03:14:05

tiger 全部 dso 化したいですー > root ★さん

game10
news18
game9
etc4
life7
hobby7
で全部かな?

**root▲ ★** · 05/01/04 03:15:48

おぉ、、、。すごい。

ちゃんと、上の広告入ってるですね。< news19

あとはime.nuかしら。
で、一番下のFOX ★は<b>と</b>で囲んだほうがよさげかも。

**root▲ ★** · 05/01/04 03:18:17

>>517
tiger503 ex7 済み
tiger504 game10
tiger505 news18
tiger506 game9/etc4/dso dsoのみ済み
tiger507 live16 済み
tiger508 life7
tiger509 news19 済み
tiger510 hobby7

上記、済み以外のところを作業してくるです。

**FOX ★** · 05/01/04 03:19:55

あっ　ime.nu があったか
明日にでもやろう

**FOX ★** · 05/01/04 03:21:12

って　ime.nu って今やってもいいんだけど、

単に http://ime.nu/http://abc.bb/ とかってつけるんでしたっけ?

**root▲ ★** · 05/01/04 03:25:07

http://ime.nu/abc.bb/

のように、http:// を除いた部分が入ります。
で、2ch.net内はime.nuを経由しないと。

で、桃色の場合はpinktowerになるのかな。

**FOX ★** · 05/01/04 03:26:24

ime.nu でいいんでしたっけ?
いくつか種類があるような。

◆cZfSunOs.U · 05/01/04 03:27:31

ftp://example.com/path/ や https://example.com/ は ime.nu 側が対応してなければ
直リンの方がいいでしょうけど．

**FOX ★** · 05/01/04 03:28:36

あっと ftp は別にいいとして
https:// は対応しなきゃ　< あんかー付け

**root▲ ★** · 05/01/04 03:36:37

>>519 のサーバ側の作業終了です。
これから、まずは news19 の read.cgi を入れておきます。

**root▲ ★** · 05/01/04 03:44:22

>>519 のサーバのread.cgiを、news19のものに入れ替えました。

**root▲ ★** · 05/01/04 03:52:07

>>519 のサーバは、read.cgi / bbs.cgi / subbbs.cgi の時には nokeepalive していたのを
dat直読み同様に keepalive 有効にしました。

**root▲ ★** · 05/01/04 03:56:48

私のほうの作業は、これでおわりのはず。
read.cgiはいったんread.soという名前でftp/putして
chmodしてrenameするのをやってみました。
Text file busyにもならないし、これがよいかなと。

ということで明日より出勤のため、そろそろおやすみなさい。

**動け動けウゴウゴ２ちゃんねる** · 05/01/04 04:01:09

>>529
root氏乙

◆cZfSunOs.U · 05/01/04 04:01:56

>>529 お疲れさまでした．

まぁあと気になるのは，Last-Modified チェックをなくしたことで，
リロードしまくりの人が多い場合にどうなるか，ってあたりですが．

**root▲ ★** · 05/01/04 04:03:10

http://news18.2ch.net/test/read.cgi/mnewsplus/1089994287/

dat落ちの時の出方、変えたですか。
最初と最後だけ出すと。

**FOX ★** · 05/01/04 04:04:06

最新のに入れ替えた　>>519

>>531
どっちが負荷高いのかな? ってとこかと、
(転送量は気にしない場合)
わからんのだが、

**root▲ ★** · 05/01/04 04:04:29

>>530-531
ほんとうに働いたのは、FOXさんかと。
私はサーバの設定をごそごそしただけ。

で、>>531は、各サーバ(特にread.cgiが多いnews18とnews19)の
転送量でおのずとわかるのかなと。

ねるー。

◆cZfSunOs.U · 05/01/04 04:10:38

>>534 ですね．

>>533 お疲れさまです．
まぁ Last-Modified チェック版と非チェック版を用意して比較するのもいいかも知れませんが．

**root▲ ★** · 05/01/04 04:10:57

寝ようと思ってnewsplusで確認したら、>>1 の出方が軒並み変なような。
あと、リンクが ? で切れてしまうような。

**動け動けウゴウゴ２ちゃんねる** · 05/01/04 05:23:31

<base>を使わない以前のURLの書き方に戻してくれよぉ(´･ω･`)

**FOX ★** · 05/01/04 05:30:41

もともと使っているから
まねしたんだが、

**動け動けウゴウゴ２ちゃんねる** · NG

「>>1」のリンクを

<a href=1 target=_blank>>>1</a>

にして、

http://qb5.2ch.net/test/read.cgi/operate/1087199303
http://qb5.2ch.net/test/read.cgi/operate/1087199303/l50/
とか、スラッシュに過不足がある場合には、

<base href="http://qb5.2ch.net/test/read.cgi/operate/1087199303/">

を付けるんじゃないのか、

**FOX ★** · 05/01/04 06:22:56

といいますと?

**動け動けウゴウゴ２ちゃんねる** · NG

今dsoの奴は常に

<base href="http://dso.2ch.net/myanmar/">

を出して、
「>>1」はdatのまま

<a href="../test/read.cgi/myanmar/1101888913/1" target="_blank">>>1</a>

ってなってるやん。

**root▲ ★** · 05/01/04 11:08:49

【事故】初詣での列に乗用車が衝突、１５人負傷＠千葉・成田山新勝寺[050103]
http://news19.2ch.net/test/read.cgi/newsplus/1104752252/

& でもリンク、切れちゃいますね。

**FOX ★** · 05/01/04 14:18:55

>>541
サーバの負荷を下げるのが目的で組んでますから、

**root▲ ★** · 05/01/04 15:09:07

life7、game9、news19で、httpd(たぶん組み込まれたread.cgi)が、
暴走を起こしている模様。

15065 ch2life7 127 0 39904K 4840K CPU1 0 337:20 35.94% 35.94% httpd
15099 ch2life7 126 0 40384K 5124K RUN 0 341:22 35.30% 35.30% httpd
14880 ch2life7 125 0 39920K 4852K RUN 0 34:48 35.21% 35.21% httpd
14990 ch2life7 126 0 40256K 5152K RUN 0 34:04 34.52% 34.52% httpd
14267 ch2life7 125 0 39912K 4700K RUN 0 229:06 34.47% 34.47% httpd
15128 ch2life7 125 0 40264K 5232K RUN 0 34:33 34.47% 34.47% httpd
14872 ch2life7 125 0 39928K 4940K RUN 0 15:31 33.98% 33.98% httpd

これから、とりあえず順にhttpdをリスタートします。

**root▲ ★** · 05/01/04 15:09:29

こんなかんじ。

%uptime
10:09PM up 38 days, 23:10, 1 user, load averages: 10.60, 10.55, 10.56

**動け動けウゴウゴ２ちゃんねる** · 05/01/04 15:15:31

hobby5 ﾁﾝ☆⌒ 凵＼(＼･∀･) まだぁ?

**root▲ ★** · 05/01/04 15:16:53

news19は観測してなかったです。life7とgame9だけ。
httpdをリスタートしました。

**FOX ★** · 05/01/04 15:18:01

枯れるまでには・・・
数ヶ月～数年かかると予想。

**root▲ ★** · 05/01/04 15:22:31

>>548
しばらくは、こんなかんじですかね。

こういった「組み込みもの」のデバッグは、さて、どうするか。
やっぱ、gdbでプロセスにアタッチかしら。

**FOX ★** · 05/01/04 15:25:47

ここ10年くらいデバッカーは使ってないなぁ、そういえば
勘で地道に、、

500 error とかの報告が上がると思われ、
その都度かと。

**root▲ ★** · 05/01/04 15:47:20

◆新板をねだるスレ＠秘密基地◆3
http://pie.bbspink.com/test/read.cgi/erobbs/1097750466/

bbspink.com 内のリンクも、ime.nu経由になってしまってます。

**root▲ ★** · 05/01/04 15:50:41

あと、bbspink.com内におけるリンクの表示は、
従来はpinktower.com経由だった気がするです。

**root▲ ★** · 05/01/04 15:58:28

あとは、bbspink.comだと、このへん↓の広告が微妙に違ってたかなと。

32 KB [ ２ちゃんねるが使っている完全帯域保証レンタルサーバー ]

**FOX ★** · 05/01/04 16:06:16

はいはいです。

**root▲ ★** · 05/01/04 16:20:21

e.ofuda.cc、ひょっとしてちょっと苦しい、、、のかな。

**FOX ★** · 05/01/04 16:25:20

おおっ
いれたまんま全サーバにくばっちまった、、、

**FOX ★** · 05/01/04 16:26:34

そうでもないような、、、
観察中。。。　< ofuda

**root▲ ★** · 05/01/04 16:36:18

イメージが表示されるのに、一呼吸ある気がするです。< e.ofuda.cc
httpdのチューニング次第かも、かも。

**root▲ ★** · 05/01/04 16:47:26

あと、前のread.cgiにあって今のにないのは、

・RAWMODE(廃止?)
・Last-Modified:(とりあえず入れない方向?)
・ひ（りゃが入れたトラックバック機能

あたり?

**動け動けウゴウゴ２ちゃんねる** · 05/01/04 16:47:52

RAWMODEってだいぶ前に廃止じゃなかったかな?

**FOX ★** · 05/01/04 16:55:56

>>558
dso化するっすかね　< ofuda
トラックバックは入ってないですか?

**FOX ★** · 05/01/04 17:00:29

>>512

$ftp->put("read.cgi","read.cgi.new");

削除は?
unlinkとかあるですか?

$ftp->rename("read.cgi.new","read.cgi");
$ftp->site("CHMOD","0755","read.cgi");

**FOX ★** · 05/01/04 17:13:46

delete ってのを見つけた。

**root▲ ★** · 05/01/04 17:16:41

$ftp->rename で、前のは上書きされるです。(一応試しました)

**FOX ★** · 05/01/04 17:17:37

およ、
permission は変えなきゃだめ?

**動け動けウゴウゴ２ちゃんねる** · 05/01/04 17:23:00

renameした時点で新ファイルが旧ファイルを消してるから、
旧ファイルのパーミッションは残らないので
新ファイルに対して改めてパーミッション設定しないとだめなんじゃないかと

**root▲ ★** · 05/01/04 17:26:18

>>566 のとおりですね。

コードを他のファイルと共通化したければ、
送り元のファイルのパーミッションをstat()か何かで見て覚えておいて、
そのパーミッションにあわせるコードを入れればいいのかな。

**FOX ★** · 05/01/04 17:34:45

あとで　メールしますが、
read.cgi に関しては dso が原本ということで、
配布バッチも直します。

つまり　read.cgi を配布するときは
ここのを使わなきゃだめということで、
あちこちにあるやつは使うと read.cgi が暴走するです。

新しいバッチのテストはこれから、、
うまく行けばいいが、(今回は4～5台暴走したようです)

**動け動けウゴウゴ２ちゃんねる** · 05/01/04 17:53:59

http://dso.2ch.net/test/read.cgi/myanmar/1102008822/400
http://dso.2ch.net/test/read.cgi/myanmar/1102008822/402
↑これ対策お願い

**root▲ ★** · 05/01/04 18:29:06

例えば550レスぐらいあるときの動作が、前と違うですね。

○今まで:
■掲示板に戻る■ 関連ページ全部 1- 101- 201- 301- 401- 501- 最新50 [PR] ２ちゃんねるカレンダー2005 [PR]

○今のもの:
■掲示板に戻る■ 関連ページ全部 1- 最新50 [PR]２ちゃんねるカレンダー2005 [PR]

**動け動けウゴウゴ２ちゃんねる** · 05/01/04 18:40:25

>>570
http://dso.2ch.net/test/read.cgi/myanmar/1101888913/41-42
42 名前：FOX ★[sage] 投稿日：05/01/03 20:58:27 ID:???
汎用ブラウザって?

細切れ転送はやめようかと思っている

＃とのことでしたー。

**root▲ ★** · 05/01/04 19:19:50

>>571
なるほど、了解。

**削除戦艦 ★** · 05/01/05 00:27:11

root▲さんへ。
業務連絡ありますのでＱお願いします。
UINはメアド欄にも忍ばせてあります（161508648）。

**FOX ★** · 05/01/05 15:54:28

全てのサーバ cobra/toger/banana で read.cgi の dso化が完了。

これから href の置き換え ime.nu 対応を行い
それが終了したら第一ステップは完。

第２ステップは
2-1) bug つぶし
2-2) 仕様の変なところは変更
2-3) 時代背景にあわせたデコレーション

こんなとこかと、

**root▲ ★** · 05/01/05 16:54:42

>>574
おつでした。
記念日ということで。

**FOX ★** · 05/01/05 17:49:58

あたらしい　チャレンジ版 read.cgi できた !!
life7 に入れていいｯすか? >>575