X
トップページ⇒運用情報
1001コメント303KB

read.cgi再開発スレ

■ このスレッドは過去ログ倉庫に格納されています
0001ｒｅｆｆｉ@報告人 ★
垢版 |
04/06/14 16:48ID:???
稼働させると問題が多発しているread.cgiを再開発等を話しあうスレッド
です。
アイデア等がありましたらこちらへどうぞ
0460 ◆cZfSunOs.U
垢版 |
04/12/14 20:03:45ID:7v0a8z4f
>>458 要するに，バックエンド側 httpd から呼び出した bbs.cgi 等から
REMOTE_ADDR を参照した際に 127.0.0.1 ではなくて本来のアクセス元が
得られるように，ということですよね？ フロントエンド側 httpd で
reverse proxy モードで mod_proxy を使えば X-Forwarded-For
リクエストヘッダが付加されます．で，バックエンド側 httpd で
>>459 の mod_rpaf ( http://stderr.net/apache/rpaf/ ) を使えば
本来のアクセス元が REMOTE_ADDR に設定されます．

なお，元のリクエストに X-Forwarded-For ヘッダが含まれている場合は
", "で区切って付加される形になります．もし bbs.cgi で
X-Forwarded-For を串判定等に利用しているのなら，", "で区切られた
2つ以上の IP アドレスが設定されていれば元のリクエストに
X-Forwarded-For が含まれていたということになりますので，
それに沿って処理すればいいかと思います．
0462root▲ ★
垢版 |
04/12/16 00:26:47ID:???
>>461
RAWモードって、最近だとどのへんのやつが使ってましたっけ。
0463動け動けウゴウゴ２ちゃんねる
垢版 |
04/12/17 02:22:31ID:T9G3OSfg
旧版kage(かちゅーしゃ)で使われてた。他の専ブラは知らない。
俺は最新版kageにraw読みこみ機能をつけて、
適宜dat直読みと切り替えられるようにしている。
ググったら現在rawモードはおまけ機能のようなので、
使うなとか廃止とか言われればそれまでだが・・・
0465 [―{}@{}@{}-] 動け動けウゴウゴ２ちゃんねる
垢版 |
04/12/21 05:34:29ID:/ZYSbzoV
実際過去ログ倉庫にあるのにエラーが出ます

そんな板orスレッドないです。

1 名前：read.cgi ver8.01+ (04/11/29-) 「Special thanks ◆cZfSunOs.U さん」投稿日：2001/04/12(木) 15:11
そんな板orスレッドないです。

過去ログ倉庫にもありませんでした。
問い合わせても見つかる可能性はほとんどありません。
0467FOX ★
垢版 |
05/01/03 03:29:54ID:???
少しすすんだんだが、

名前欄って緑じゃなかったっけ?
<font color=green> で強引に緑にするんだっけ?
0470 ◆cZfSunOs.U
垢版 |
05/01/03 12:28:16ID:yt/ZsWUR
以前も名前欄の色は <font> タグ使わずに CSS 使ったらどうかという話もあったのですが，
当時は CSS 未対応ブラウザのことも考慮して見送りになったということでしたが，今なら
CSS 未対応ブラウザのことはあまり考えずに CSS 使ってしまってもいいかも知れませんね．

あと，

>time[2545861248] LastModifyed 今回は無しの方向で、

Last-Modified なしということは，ブラウザのキャッシュを効かせず毎回読み込ませる
という方針でしょうか？ time の表示もおかしくなっているようですが，
apr_time_t はマイクロ秒単位の 64-bit 整数です．printf 文のフォーマット指定は
ILP32 なら %lli，LP64 なら %li かと．
0475FOX ★
垢版 |
05/01/03 21:00:27ID:???
現在　新しいread.cgi は
dso/ex7/ex9/live8/news19 に入っています。

今までのところ、悪さはしていない予感。
0476FOX ★
垢版 |
05/01/03 21:05:33ID:???
次はいよいよ　広告関係なんだが、、、
なるべく広告定義ファイルを読まないように実装したいなぁと
思っているけど出来るべか。

また同じような事を聞きますが、
dso を使った場合。　read.cgi のプロセスは複数起動される。
何個起動されているかは知ることが出来るがコントロールする事は出来ない。
read.cgiプロセス間に相互に関連性はない。

この辺が SpeedyCGI の時とは違っているわけだな。

この認識であってます? (言葉の使い方等も違っていたら突っ込んで欲しい)
0477 ◆cZfSunOs.U
垢版 |
05/01/03 22:42:16ID:yt/ZsWUR
>>476
>dso を使った場合。　read.cgi のプロセスは複数起動される。

read.cgi は httpd プロセスと同一メモリ空間に読み込まれるので，
read.cgi そのもののプロセスは起動されません．httpd プロセスが複数なら
read.cgi（が読み込まれている）プロセスも複数ということにはなります．

>何個起動されているかは知ることが出来るがコントロールする事は出来ない。

httpd プロセスをコントロールすることが即 read.cgi（が読み込まれている）
プロセスのコントロールということになります．

>read.cgiプロセス間に相互に関連性はない。

相互の関連性というのが変数共有等を指しているのなら，
上の方で言われている通りですね．
0478 ◆ToT/VojxVY
垢版 |
05/01/03 22:45:46ID:/tYpXQ+q
みゃんまーでテストしてきましたー。
最新レス番を指定すると全レスが表示されますよ。
0479root▲ ★
垢版 |
05/01/03 22:46:47ID:???
read.cgiは完全にhttpdと同化して動く、ということですね。

つまり、prefork(現在の2chのサーバのhttpdの設定)でhttpdの最大数が768個なら、
768個までread.cgiが同時に動く(可能性がある)と。
0480FOX ★
垢版 |
05/01/03 22:47:11ID:???
何回もすみません >>477

どうしますかねぇ

起動毎に広告定義ファイルを読まなくても良い方法。
0481FOX ★
垢版 |
05/01/03 22:48:35ID:???
現在は　ソース埋め込みです。

>>479
live16 もdso化しようかと、
0484FOX ★
垢版 |
05/01/03 22:51:59ID:???
その　プールとやらはどこにあるんですか?

見たところ　アパッチの中のあるメモリ領域のように感じましたが
read.cgi から作成/設定、設定されていたら読み出し
こんな感じですか?
0486root▲ ★
垢版 |
05/01/03 23:00:28ID:???
live16をdso化しました。
news19から持ってきたread.cgiを入れてあります。
0487FOX ★
垢版 |
05/01/03 23:01:52ID:???
どもです　どもです　>>486

>>485
挑戦してみます。
0488FOX ★
垢版 |
05/01/03 23:08:41ID:???
ちなみに modcgi_dso のホームページってどこなんですか? >>485
リンクしようかと、
0489 ◆cZfSunOs.U
垢版 |
05/01/03 23:12:22ID:yt/ZsWUR
>>488 現状ではないです．作るなら 2ch Wiki あたりにとか......
0490FOX ★
垢版 |
05/01/03 23:16:50ID:???
りょうかいですー
static なページを作ってそこにリンクしておこう
奮戦気あたりをぼちぼち書いて、
0491FOX ★
垢版 |
05/01/03 23:18:59ID:???
typedef struct のところで
コンパイル時こんなエラーが、

read.c:10: error: syntax error before "apr_thread_rwlock_t"

何かヘッダーが足りないですか?
0492FOX ★
垢版 |
05/01/03 23:23:18ID:???
あと、
#define AD_CHECK_INTERVAL 60

の 60 って単位は sec ですか?
0493 ◆cZfSunOs.U
垢版 |
05/01/03 23:24:48ID:yt/ZsWUR
>>491 あ......thread サポートが有効でないとそのあたりが定義されませんね......
rwlock や mutex を使ってるところは

#if APR_HAS_THREADS
　　　　:
#endif

で囲ってしまうのがいいかと．

>>492 そうです．
0494root▲ ★
垢版 |
05/01/03 23:28:33ID:???
threadサポートは(今のところ)入れてないです。< tiger/cobra
今のところこれでいきますが、将来worker MPMとか使う時は、どきどき、か。

でもSpeedyCGIもworker MPMには対応してないので、
その時にはまた別途、ってかんじかなと。
0495FOX ★
垢版 |
05/01/03 23:29:49ID:???
それでやってみます
0496FOX ★
垢版 |
05/01/03 23:41:47ID:???
質問ですじゃ


if (ad_pool->mtime)
ap_rwrite(ad_pool->m->mm, ad_pool->m->size, r);

この部分で実際に書いていると思うんですが、(>>441)
1) if (ad_pool->mtime) これはどんな意味なんですか?
2) 文字列はad_pool->m->mmに入っているから strcpy(保存.ad_pool->m->mm);
　　とかやって取って置けますか?
0497FOX ★
垢版 |
05/01/03 23:42:55ID:???
ちなみに　コンパイルも通って
実際に文字列がファイルから取ってこれるところまではできました。
インターバルが 60 になっているかどうかの検証はしていません。
0498 ◆cZfSunOs.U
垢版 |
05/01/03 23:52:44ID:yt/ZsWUR
>>497
1) 広告ファイルが存在しないなど読み込み不能の場合は ad_pool->mtime を
　　0 にしているので，そのチェックです．
2) できますが，strcpy するなら mmap する意味がなくなってしまうかと．
　　現状のコードは mmap された領域自体を保持するようにしています．
　　# もっとも，終端が '\0' である保証はないので strcpy より memcpy の方がいいですが．
0500FOX ★
垢版 |
05/01/04 00:03:42ID:???
ふむふむ

必要なときに出すことにしまーす。

広告定義ファイルが更新されたら即広告も変化するということでいいのかしら?
0501 ◆cZfSunOs.U
垢版 |
05/01/04 00:07:21ID:cUO4X74T
>>500 前回のチェックから AD_CHECK_INTERVAL 秒経過後のチェックで
ファイル更新が確認されれば広告も更新ということですね．
0502FOX ★
垢版 |
05/01/04 00:08:25ID:???
うーむ

600 sec にして広告変更したらすぐ変わっちまったなぁ
毎回読んじゃっているのかしら?
0503 ◆cZfSunOs.U
垢版 |
05/01/04 00:10:27ID:cUO4X74T
あと，ファイル更新の際は旧ファイルをいったん rm するか，
新しいファイルをいったん別ファイルで作成した上で mv するか，という手順が必要です．
mmap の性質上，旧ファイルをそのまま書き換えると SEGV でこける可能性があります．
0504 ◆cZfSunOs.U
垢版 |
05/01/04 00:14:01ID:cUO4X74T
>>502 httpd プロセスが多数ある状況では，前回呼んだ時と同じ httpd プロセスで
処理してもらうってことにはなかなかならないと思うので，その確認をするなら
httpd プロセス数を絞らないと難しいかもです．
0505root▲ ★
垢版 |
05/01/04 01:09:03ID:???
>>504
httpdのpidとかでチェックする、、、のかな。
でも、例えばlive8やlive16とかだと1280人もいるし。
0506 ◆cZfSunOs.U
垢版 |
05/01/04 01:15:34ID:cUO4X74T
>>505 やるとすればそうなりますね．dso.2ch.net だけ一時的に数を絞ってみるとか......
0507FOX ★
垢版 |
05/01/04 01:30:33ID:???
ファイルは管理人が必要なときに FTP で一気に
全サーバに配られる仕組みになっとります。
0508root▲ ★
垢版 |
05/01/04 01:37:16ID:???
>>507
FTPでもrenameはできるので、
いったん read.cgi.new という名前で put して、
read.cgiにrenameするのがいいとおもわれますです。
0509FOX ★
垢版 |
05/01/04 01:38:50ID:???
バッチというか書き方わからんす　
0510FOX ★
垢版 |
05/01/04 01:39:46ID:???
Perl で FTP だったりするです。
現状までは書いたけど、それ以上は私の能力の限界だったり、、
0511 ◆cZfSunOs.U
垢版 |
05/01/04 01:44:10ID:cUO4X74T
あっ......>>503 は広告ファイルのことを意図して書いたんですが，
dlopen() も OS 内部で mmap() しますから read.cgi 自体もそうですし，
その他のデータファイル等も CGI 等でオープン中に中身が変わると
やはり不都合が生じる可能性があるので，基本的にその他のファイルも含めて
>>508 のような手順を踏むのがいいかも知れませんね．
0512root▲ ★
垢版 |
05/01/04 02:01:16ID:???
Net::FTP を使ってるなら、単にこれでいいのではと。

$ftp->put("read.cgi","read.cgi.new");
$ftp->rename("read.cgi.new","read.cgi");
$ftp->site("CHMOD","0755","read.cgi");
0514FOX ★
垢版 |
05/01/04 02:25:32ID:???
たくさんあるですよ、、、
0516FOX ★
垢版 |
05/01/04 03:07:30ID:???
ほぼ完成か?
0517FOX ★
垢版 |
05/01/04 03:14:05ID:???
tiger 全部 dso 化したいですー > root ★さん

game10
news18
game9
etc4
life7
hobby7
で全部かな?
0518root▲ ★
垢版 |
05/01/04 03:15:48ID:???
おぉ、、、。すごい。

ちゃんと、上の広告入ってるですね。< news19

あとはime.nuかしら。
で、一番下のFOX ★は<b>と</b>で囲んだほうがよさげかも。
0519root▲ ★
垢版 |
05/01/04 03:18:17ID:???
>>517
tiger503 ex7 済み
tiger504 game10
tiger505 news18
tiger506 game9/etc4/dso dsoのみ済み
tiger507 live16 済み
tiger508 life7
tiger509 news19 済み
tiger510 hobby7

上記、済み以外のところを作業してくるです。
0520FOX ★
垢版 |
05/01/04 03:19:55ID:???
あっ　ime.nu があったか
明日にでもやろう
0521FOX ★
垢版 |
05/01/04 03:21:12ID:???
って　ime.nu って今やってもいいんだけど、

単に http://ime.nu/http://abc.bb/ とかってつけるんでしたっけ?
0522root▲ ★
垢版 |
05/01/04 03:25:07ID:???
http://ime.nu/abc.bb/

のように、http:// を除いた部分が入ります。
で、2ch.net内はime.nuを経由しないと。

で、桃色の場合はpinktowerになるのかな。
0523FOX ★
垢版 |
05/01/04 03:26:24ID:???
ime.nu でいいんでしたっけ?
いくつか種類があるような。
0525FOX ★
垢版 |
05/01/04 03:28:36ID:???
あっと ftp は別にいいとして
https:// は対応しなきゃ　< あんかー付け
0526root▲ ★
垢版 |
05/01/04 03:36:37ID:???
>>519 のサーバ側の作業終了です。
これから、まずは news19 の read.cgi を入れておきます。
0527root▲ ★
垢版 |
05/01/04 03:44:22ID:???
>>519 のサーバのread.cgiを、news19のものに入れ替えました。
0528root▲ ★
垢版 |
05/01/04 03:52:07ID:???
>>519 のサーバは、read.cgi / bbs.cgi / subbbs.cgi の時には nokeepalive していたのを
dat直読み同様に keepalive 有効にしました。
0529root▲ ★
垢版 |
05/01/04 03:56:48ID:???
私のほうの作業は、これでおわりのはず。
read.cgiはいったんread.soという名前でftp/putして
chmodしてrenameするのをやってみました。
Text file busyにもならないし、これがよいかなと。

ということで明日より出勤のため、そろそろおやすみなさい。
0531 ◆cZfSunOs.U
垢版 |
05/01/04 04:01:56ID:cUO4X74T
>>529 お疲れさまでした．


まぁあと気になるのは，Last-Modified チェックをなくしたことで，
リロードしまくりの人が多い場合にどうなるか，ってあたりですが．
0533FOX ★
垢版 |
05/01/04 04:04:06ID:???
最新のに入れ替えた　>>519

>>531
どっちが負荷高いのかな? ってとこかと、
(転送量は気にしない場合)
わからんのだが、
0534root▲ ★
垢版 |
05/01/04 04:04:29ID:???
>>530-531
ほんとうに働いたのは、FOXさんかと。
私はサーバの設定をごそごそしただけ。

で、>>531は、各サーバ(特にread.cgiが多いnews18とnews19)の
転送量でおのずとわかるのかなと。

ねるー。
0535 ◆cZfSunOs.U
垢版 |
05/01/04 04:10:38ID:cUO4X74T
>>534 ですね．

>>533 お疲れさまです．
まぁ Last-Modified チェック版と非チェック版を用意して比較するのもいいかも知れませんが．
0536root▲ ★
垢版 |
05/01/04 04:10:57ID:???
寝ようと思ってnewsplusで確認したら、>>1 の出方が軒並み変なような。
あと、リンクが ? で切れてしまうような。
0538FOX ★
垢版 |
05/01/04 05:30:41ID:???
もともと使っているから
まねしたんだが、
0540FOX ★
垢版 |
05/01/04 06:22:56ID:???
といいますと?
0543FOX ★
垢版 |
05/01/04 14:18:55ID:???
>>541
サーバの負荷を下げるのが目的で組んでますから、
0544root▲ ★
垢版 |
05/01/04 15:09:07ID:???
life7、game9、news19で、httpd(たぶん組み込まれたread.cgi)が、
暴走を起こしている模様。

15065 ch2life7 127 0 39904K 4840K CPU1 0 337:20 35.94% 35.94% httpd
15099 ch2life7 126 0 40384K 5124K RUN 0 341:22 35.30% 35.30% httpd
14880 ch2life7 125 0 39920K 4852K RUN 0 34:48 35.21% 35.21% httpd
14990 ch2life7 126 0 40256K 5152K RUN 0 34:04 34.52% 34.52% httpd
14267 ch2life7 125 0 39912K 4700K RUN 0 229:06 34.47% 34.47% httpd
15128 ch2life7 125 0 40264K 5232K RUN 0 34:33 34.47% 34.47% httpd
14872 ch2life7 125 0 39928K 4940K RUN 0 15:31 33.98% 33.98% httpd

これから、とりあえず順にhttpdをリスタートします。
0545root▲ ★
垢版 |
05/01/04 15:09:29ID:???
こんなかんじ。

%uptime
10:09PM up 38 days, 23:10, 1 user, load averages: 10.60, 10.55, 10.56
0547root▲ ★
垢版 |
05/01/04 15:16:53ID:???
news19は観測してなかったです。life7とgame9だけ。
httpdをリスタートしました。
0548FOX ★
垢版 |
05/01/04 15:18:01ID:???
枯れるまでには・・・
数ヶ月〜数年かかると予想。
0549root▲ ★
垢版 |
05/01/04 15:22:31ID:???
>>548
しばらくは、こんなかんじですかね。

こういった「組み込みもの」のデバッグは、さて、どうするか。
やっぱ、gdbでプロセスにアタッチかしら。
0550FOX ★
垢版 |
05/01/04 15:25:47ID:???
ここ10年くらいデバッカーは使ってないなぁ、そういえば
勘で地道に、、

500 error とかの報告が上がると思われ、
その都度かと。
0552root▲ ★
垢版 |
05/01/04 15:50:41ID:???
あと、bbspink.com内におけるリンクの表示は、
従来はpinktower.com経由だった気がするです。
0553root▲ ★
垢版 |
05/01/04 15:58:28ID:???
あとは、bbspink.comだと、このへん↓の広告が微妙に違ってたかなと。

32 KB [ ２ちゃんねるが使っている 完全帯域保証 レンタルサーバー ]
0554FOX ★
垢版 |
05/01/04 16:06:16ID:???
はいはいです。
0555root▲ ★
垢版 |
05/01/04 16:20:21ID:???
e.ofuda.cc、ひょっとしてちょっと苦しい、、、のかな。
0556FOX ★
垢版 |
05/01/04 16:25:20ID:???
おおっ
いれたまんま全サーバにくばっちまった、、、
0557FOX ★
垢版 |
05/01/04 16:26:34ID:???
そうでもないような、、、
観察中。。。　< ofuda
0558root▲ ★
垢版 |
05/01/04 16:36:18ID:???
イメージが表示されるのに、一呼吸ある気がするです。< e.ofuda.cc
httpdのチューニング次第かも、かも。
0559root▲ ★
垢版 |
05/01/04 16:47:26ID:???
あと、前のread.cgiにあって今のにないのは、

・RAWMODE(廃止?)
・Last-Modified:(とりあえず入れない方向?)
・ひ（りゃが入れたトラックバック機能

あたり?
■ このスレッドは過去ログ倉庫に格納されています
ニューススポーツなんでも実況