X

クローラー&過剰リロード対策スレ2【新バーボン】

■ このスレッドは過去ログ倉庫に格納されています
2005/04/16(土) 19:30:22ID:???0
現状把握が困難なので前スレ参照してください。

前スレ
クローラー&過剰リロード対策スレ
http://qb5.2ch.net/test/read.cgi/operate/1113508190/
2005/04/16(土) 21:38:10ID:EOtw8pGQ0
>>69
粘着に見える君がおかしい
2005/04/16(土) 21:42:03ID:oIXt/cJW0
>>70
たぶん、
条件付で 黒やぎ経由 になる (バーボン除外は固定IPじゃないと無理っぽ)
2005/04/16(土) 22:00:57ID:7NypLNGX0
>>72
公開しているところのほとんどは固定IPだと思われます。
とりあえずは作者鯖を除外してもらいたいですね。
74 ◆MiMIZUNCjA
垢版 |
2005/04/16(土) 22:14:08ID:CU1bMhfw0
>>67 よろしくお願いします。
>>70 固定IPですか。イロイロ見て回ってみます
2005/04/16(土) 22:18:24ID:7NypLNGX0
とりあえず作者鯖。

61.213.77.37 (j077037.ppp.asahi-net.or.jp)

バーボン中です。とほほ。
2005/04/16(土) 22:22:48ID:???0
>74
僕に言われても権限はありませんので(苦笑
黒山羊さんの使用についてはFOXさんとrootさんとの話し合いになると思います。
2005/04/16(土) 22:23:40ID:mWlTHBi00
>>72
携帯(アプリ)−中間鯖−黒山羊−2chスレ
ってこと?
2005/04/16(土) 22:27:35ID:oIXt/cJW0
>>73
固定
ttp://imona.sakura.ne.jp/
ttp://www.imona2ch.com/
ttp://imona.sama.to/
ttp://qwe.ne.jp/

ddns
ttp://e-n-d.dyndns.org/imona/ 
ttp://pochi.or.tp/          
ttp://ahya.jpn.ph/imona/      
ttp://imona.dyndns.info/       

リスト from
★携帯用 2chブラウザ iMona Part11★
ttp://pc8.2ch.net/test/read.cgi/software/1099852332/3

>>77
読み込みは そういうこと (書き込みは黒やぎ経由では出来ない)
2005/04/16(土) 22:33:00ID:oIXt/cJW0
ちなみに

www.imona2ch.com -> 216.22.28.65 -> ns1.datafly.net
imona.sama.to <-> 218.224.207.100
imona.sakura.ne.jp -> 202.181.99.8 -> www288.sakura.ne.jp
qwe.ne.jp <-> 202.229.20.200

この辺は除外可能

FOX ★さん↑の4つは 除外するようにしてください

DDNS使ってるところは >77 の形になる (申請が必要かも)
2005/04/16(土) 22:33:40ID:mWlTHBi00
>>78
ttp://imona.dyndns.info/
ここは公開終了してる

>読み込みは そういうこと (書き込みは黒やぎ経由では出来ない)
それならいいんだけれど
2005/04/16(土) 22:39:47ID:7NypLNGX0
やはり作者鯖の除外は難しいですか…がっくり。

>>80
iMonaは規制が正常に行われるようにbbs.cgiを呼び出して書き込みをしています。
2005/04/16(土) 22:42:50ID:6SX5UrED0
どえらい事になってますね・・・。

固定IPならば除外可能・・・?
もしかして作者鯖は非固定?
2005/04/16(土) 22:43:08ID:mWlTHBi00
公開中間鯖一覧
http://nov.s56.xrea.com/saba/docomo.html
http://nov.s56.xrea.com/saba/au.html
http://nov.s56.xrea.com/saba/vodafone.html
2005/04/16(土) 22:48:55ID:hc6sK8yA0
>>83
(ノ∀`) アチャー
なんで、ここに貼るかなぁ
85動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 22:52:49ID:e4qmvtms0
バーボンハウスの
1 morningcoffee 2 news4vip 等の板名と
5 BBON.news18.846 6 BBON.news19.453 等の鯖名の違いは何?
2005/04/16(土) 22:56:23ID:oIXt/cJW0
>>82
正解

正引き imona.net -> 61.213.77.37
逆引き 61.213.77.37 -> j077037.ppp.asahi-net.or.jp

逆引き結果がISPだと無理 (一部例外有)
固定IP貰ってる自宅鯖( or どっかのレンタル鯖)であれば問題なく除外可能
2005/04/16(土) 23:07:10ID:2/xdsGVt0
もうiMonaも負荷軽減に役立ってるんだからBananaでいいから鯖貸せばいいのに>2ch運営
2005/04/16(土) 23:08:33ID:2/xdsGVt0
あ、>>87はiMona作者にって意味な
NGNG
219.113.242.218
219.113.242.220

を、qb5の.htaccess から手ではずしました。(クラシックメニュー関係)
既にチェックプログラム中の除外リストには入っています。

これから、前スレで読んでいなかった500ぐらい?の未読と、
このスレの未読を読んできます。
NGNG
あと、夕方のFOX事件のからみでqb5の.htaccessに、
かなりの量、ごみの deny from が入っているようです。
(たぶん、ある時間のqb6か何かの.htaccessがコピーされて、そのままになっている)

これは、あとでまとめてチェックしなおします。
2005/04/16(土) 23:18:15ID:2/xdsGVt0
>>89
乙です
2005/04/16(土) 23:19:20ID:oIXt/cJW0
>>89
この辺(iMonaの中間鯖) も固定なんで除外 おながい
www.imona2ch.com -> 216.22.28.65 -> ns1.datafly.net
imona.sama.to <-> 218.224.207.100
imona.sakura.ne.jp -> 202.181.99.8 -> www288.sakura.ne.jp
qwe.ne.jp <-> 202.229.20.200
NGNG
>>90
qb5の.htaccessにあった、バーボンハウス復旧処理の際の残骸を掃除しました。
本来、qb5はバーボンハウスの対象外です。

今の状態でqb5でバーボンになるIPアドレスは、バーボン経由ではなくて、
静的に登録されているもののはず。
94動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 23:27:58ID:XKoCo/eCO
43.235.171.84 (paffy.ac) 60
の中の人です。出先なので携帯から取り急ぎです。
(自分のサイトで教えてこのスレを教えて貰いました→http://pita.paffy.ac/bbs/test/read.cgi/pita/305/125-

http://pita.paffy.ac/biketh/
↑のために、15分に1回、バイク板のsubject.txt拾っているのと、
1日1回早朝5時頃、落ちたログを拾ってるだけですが、だめですか?
2005/04/16(土) 23:37:09ID:Ou4gt41r0
さっきまで運営カテゴリの板全部がバーボンだったけれど何かあったの?

クロールの規制には引っかかっていないし規制リストにもIPは載っていなかった。
のにバーボンに。そもそも運営カテゴリって規制中の人でも読み書きできるはずだよね。。。

>>93
何か有ったのか。前スレ読んでくるよウンコ( ・∀・)/≡●
NGNG
>>95
たぶん、>>90 >>93 かと。
2005/04/16(土) 23:46:58ID:qbRSs5wNO
せっかく2chの鯖負荷を減らすためにiMonaを作ったのに、作者さんの鯖をアク禁にするのは本末転倒では…?
こうしてほかの中間鯖もアク禁にされて、c.2chが過負荷で人多すぎになって、携帯から2ちゃんねるは見れませんで終了する悪寒
2005/04/16(土) 23:48:11ID:Ou4gt41r0
>>96
アリガトー

何か色々大変ね。ルートきゅん頑張れ。
夜勤のおにぃさんはあれだ。もうちょっとこう。
行き当たりばったり杉。
2005/04/16(土) 23:49:28ID:1tioJpdA0
行き当たりばったりの人がいるから
rootくんが安全に獣道の整備ができることに気づけ
2005/04/16(土) 23:53:45ID:Ou4gt41r0
>>99
や、ある程度行き当たりばったりなのは2ちゃんねるの「味」だし、まぁ良いんじゃネーノかよ?と。
「杉」なのがアレな訳よ。
何事も程々と言う物があるわけで。。実験用のサーバで動作テストをするとか。
2005/04/16(土) 23:57:04ID:fR8DO4Ik0
>>94
ほんとに15分に1回だったら、全員バーボンになっちゃうね。
2005/04/16(土) 23:58:54ID:1tioJpdA0
実験用のサーバでテストしてものいぼーくんがひっかかることも
iMonaがひっかかることもわからんかったでしょ
103root▲ ★
垢版 |
NGNG
>>97
まだ、前スレを読んでいるわけですが、釣られてみよう。

たぶん、そういった負荷軽減にご協力いただいている方に対応するために、
こちら側でも*以前よりもより負荷を効率よく軽減するための*
器を用意することになるんだと思います。
例えば、対外向けdatプールサーバ(ここでblackgoatと称しているもの)とか。

つまり、今までよりも一歩前にいって、もっとよくしようというわけです。
今は、それを生み出すための陣痛がはじまった段階なのかなと。

で、 c.2ch.net 関係については、大幅な設備増強が決定しました。
このスレの前スレで、管理人が正式にNTTecのJimさんにゴーを出しました。
かなりの数の「tiny tigerサーバ(*1)」と、それに対応するための高価なスイッチ(全ポート1G対応)が、
これから数ヶ月〜たぶん半年ぐらいの間に、投入されていきます。

なお、これらの携帯用サーバを設置するためのラックスペースは「この用途専用」のものとなっており、
先月の工事によりPIEに拡張された「XO」というロケーションに、1ラックまるごと確保されています。

なお、これらの料金はすべてひ(りゃ が払います。ふとっぱら。

(*1)携帯フロントエンド用。基本的には今のtigerサーバで、ディスクがSCSIではなくてIDEなもの。
携帯用フロントエンドサーバでは高い処理能力は必要ですが、
高速ディスクI/Oが不要なため、このサーバを採用することになりました。
2005/04/17(日) 00:02:49ID:F9SplYJZ0
ひの字のひとすげー
105動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/17(日) 00:04:40ID:jlGzBwSM0
ex10の規制無くなった?
2005/04/17(日) 00:05:43ID:hc6sK8yA0
ひ(ry
よくやった。
107root▲ ★
垢版 |
NGNG
>>105
ex10は最重要板、news4vipがありますので、現在のところこれの対象外です。
前スレの574から抜粋。

・oyster901 = ex10

管理人が今最も手厚くしているnews4vipがある、2ちゃんねるで一番大事なサーバなので、
これだけは管理人に決めてもらおうと思います。

管理人が「設定してくださいー」と言えばしくみ発動するし、「しばらく様子を見てくださいー」とか
「しばらく入れないでくださいー」言えば、今は発動しません。

とりあえず、管理人から何らかの明示的な指示があるまで、ex10は保留(発動しない)にします。
2005/04/17(日) 00:08:17ID:KEq2K98y0
まあ初期のトラブルが無くなるまでは
騒がずにマターリと待っているのが
一番いいと思うのだが。
2005/04/17(日) 00:13:56ID:/kDFV8er0
>>100
実際に人がいぱーいいる鯖でやらんと実験にならんのよね
つーか、2ちゃんねる全部が実験場と思っとった方がいいですよ
110root▲ ★
垢版 |
NGNG
>>94
6 BBON.hobby7.946   43.235.171.84 (paffy.ac) 119

これですか。946回 > 400回 で、バーボン行きと。

できれば400回を下回るように、マターリとやっていただけると助かります。

# 今の値(400)は、個人的には結構リーズナブル(やさしくやればクリアできる)ぐらいだと思っていたり。
111root▲ ★
垢版 |
NGNG
120分経って解除されたら、すぐにまた掲載されました。
50 BBON.hobby7.949   43.235.171.84 (paffy.ac) 1

これだと、ちと、ううむで。
11297
垢版 |
2005/04/17(日) 00:23:36ID:cQJMS5T5O
rootたん

携帯鯖強増マジトンクスです。
ですが、ブックマーク機能がないので非常に使いにくいです。専ブラのブックマークを、IEのお気に入りで代用するような感じで…
NGNG
>>111
関係無いのですが、昨日も寝ずに動いておられたので今夜はちゃんと寝て休んで下さいね。
114root▲ ★
垢版 |
NGNG
>>112
例えば設備に余裕ができれば、機能強化も可能なのかもしれませんね。
そもそも今の機能削減は、blackgoat側の負荷を減らすためにやったことだった気がするので。

ちなみに、感謝する相手は私ではなくて、管理人です(す)。
11594
垢版 |
2005/04/17(日) 00:32:15ID:BczC5RBSO
>>110
それはデイリーのリクエスト数ですか?
ってことは多分、一定期間鯖が落ちたため、
全てのスレ(バイク板)を新スレと誤認識したせいだと思います。
さっき書き忘れましたが、subject.txt拾った後に、
新スレがあったらその>>1の内容だけ拾ってました。
なので現存スレを全部舐めちゃったんだと思います。
>運営な方
その辺の仕様は早めに直しますので、
出来れば解除してくださいです(´・ω・`)
116root▲ ★
垢版 |
NGNG
>>114
最初の 例えば は削除で。
117root▲ ★
垢版 |
NGNG
>>115
デイリーじゃなくて、単位時間あたりです。
非公開ですが、1時間よりは少ないですよ。

で、もうしわけないですが、直すほうを急いでいただければと。
2005/04/17(日) 00:34:17ID:dZJX22h+0
>>115
直してから、でしょ
11994
垢版 |
2005/04/17(日) 00:36:29ID:BczC5RBSO
>>111
あう。。。
書いてる間に。携帯書きにくい(´・ω・`)

しばらく接続できてなかったので、また全スレ舐めちゃったんだと思います_| ̄|〇
120root▲ ★
垢版 |
NGNG
>>65
1回ですね。
だから、バーチャルホストを2つ入れるのは、実はあんまりやりたくなかったり。
121root▲ ★
垢版 |
NGNG
>>85
> 1 morningcoffee 2 news4vip 等の板名と

今までの仕組みでひっかかった(過剰な投稿、過剰なスレ立て)。

> 5 BBON.news18.846 6 BBON.news19.453 等の鯖名の違いは何?

今回の仕組みでひっかかった(クロール、過剰なリロード)。
2005/04/17(日) 00:41:20ID:9BDtAuHE0
>>102
や、俺様個人などは大した問題じゃないでしょう。
設定ファイルが壊れて多数の人がqbを見られなくなったりとかさ。そう言うの。

>>109
確かに一理あるな。。

12394
垢版 |
2005/04/17(日) 00:44:08ID:BczC5RBSO
>>117-118
了解しました
2005/04/17(日) 00:45:18ID:VZ/vTLMV0
>や、俺様個人などは大した問題じゃないでしょう。
何をおっしゃっておられるのですか。
のいぽー様は2ちゃんの導きの光なのです。
2005/04/17(日) 00:46:43ID:Zg2YkisA0
root★さん

メール出しました
2005/04/17(日) 00:51:10ID:lwM/vvCG0
すごい
12 BBON.pie.4620   218.47.3.125 (i218-47-3-125.s04.a023.ap.plala.or.jp) 89

4620 だって
127root▲ ★
垢版 |
NGNG
落ち着いてきたみたいなので、
問題なければ、今後自動チェック対象サーバを増やしていこうかと考えています。
bbspinkは私も脳内予想少ししてましたが、やはりクローラーさんがかなりいるみたいですね。

live系(サーバの安定より連続リロード優先、ただし落ちても文句言わないこと)と
ex10(news4vipがある最重要サーバ)以外には、入れようかなと。

>>125
どもです。受け取りました。
食事おわってから、徐々に返事しようかと。
2005/04/17(日) 00:56:00ID:lwM/vvCG0
>>127
>今後自動チェック対象サーバを増やして
!!!

まだだったのか

>92 にあるやつはどうなった?
2005/04/17(日) 01:04:22ID:hkDHif/H0
rootたんは一体いつ寝てるんだろう
13085
垢版 |
2005/04/17(日) 01:07:46ID:0AlSQIPu0
>>121
THX!
2005/04/17(日) 01:07:54ID:lwM/vvCG0
>>129
rootたんは休み無く働いてます

4 BBON.pie.4620   218.47.3.125 (i218-47-3-125.s04.a023.ap.plala.or.jp) 106
36 BBON.hobby7.1587   220.10.180.234 (YahooBB220010180234.bbtec.net) 16
1000越えはこれだけか・・・

10000を超えるつわもの(←なぜか変換できない)かも〜ん
132root▲ ★
垢版 |
NGNG
>>129
さっきまで、よく寝てましたよ。
今日は某自然教育園に行ってきたので、相当いい気分転換になったです。

PIE立ち上げたりHEから撤退してたりしたあの頃に比べれば、それほどでもないし。
2005/04/17(日) 01:13:01ID:biU9cvGZ0
>>132
科博のかなぁ・・・
2005/04/17(日) 01:15:17ID:lwM/vvCG0
>>132
国立科学博物館付属 自然教育園
ttp://www.ins.kahaku.go.jp/

上野?
2005/04/17(日) 01:16:54ID:fId142gb0
白金かも
2005/04/17(日) 01:19:40ID:0s1tpt240
>>132
iMona.netは固定IPだそうですので除外お願いします
http://pc7.2ch.net/test/read.cgi/pc2nanmin/1110366452/162
2005/04/17(日) 01:30:53ID:wSxGeDMY0
>>134
科博は上野だけど、附属自然教育園は白金。
138帰ってきた100円札マン ◆100enpax7E
垢版 |
NGNG
rootさんって本業は何なんだろう・・・。
2005/04/17(日) 01:58:36ID:dZJX22h+0
プロ飛行機の乗客
2005/04/17(日) 02:09:12ID:MbzKq1VW0
>>138
たぶん鯖の中の人だよ
調子がおかしくなると外に避難してくる
2005/04/17(日) 02:44:35ID:isJ1G8NUO
>>139
ワロシw
2005/04/17(日) 02:52:34ID:rL1TqAGP0
こんなん導入されたのか。
これ以前に永遠のバーボンだったとことか解除はされる?
xreaで取得さえバーボンな鯖に当たって困ったんだよね。
subject.txt拾いたいだけだったのに。
143root▲ ★
垢版 |
NGNG
>>142
永遠バーボンなところは、前から継続していくつかあるです。
最近ではこことか。

# cybernavi 219.113.228.248/29
# http://qb5.2ch.net/test/read.cgi/operate/1103455176/730
deny from 219.113.228.248/29

身に覚えがないのに永遠バーボンだった場合は、報告いただけると。
2005/04/17(日) 03:07:25ID:56b7U8U70

>これ以前に永遠のバーボンだったとことか解除はされる? 

契約したサーバが運悪くバーボン鯖で、お金をドブに捨てちゃった人おおいですからねぇ。。。
2005/04/17(日) 03:10:15ID:56b7U8U70
>>143
ついでですから、報告。

iMona@z4鯖
ttp://imona.zzzz.jp/

永遠バーボンだと思うのですが、当時iMona住人で調べても情報が出てこなかったデス。
2005/04/17(日) 03:11:04ID:hkDHif/H0
XREAとかは公開p2でごっそり焼かれた口じゃね?その後まるごとdenyしたんだっけ?
2005/04/17(日) 03:19:42ID:muWLya3B0
ところで、みなさんは巡回で引っかかったことはありませんか?
もしくはどんなペースで巡回してますでしょうか。

私はかちゅ〜しゃで2〜3日に1回巡回してますが…。
148root▲ ★
垢版 |
NGNG
ねむい、、、さすがにちょっとへろへろかも。

>>125 の返事は、明日あらためて出すです。
NGNG
よっ
2005/04/17(日) 05:07:48ID:jz6ovPuT0
>>149
おはよーございますノシ
2005/04/17(日) 05:08:57ID:fpZfkbei0
ネギマがあるとなかなかさまになりますね、お疲れさまでした。
2005/04/17(日) 05:12:20ID:isJ1G8NUO
>>148
おやすめなさい
>>149
その名前は昨日のアレのままかい?
NGNG
変身
NGNG
ルータは再起動しないですか(^_^;)そうですか
NGNG
このままで行こうかと、
156動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/17(日) 05:30:20ID:6D4SK2qE0
糞狐のその変な眼鏡みたいなの何なの?
157動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/17(日) 05:33:29ID:siUU98lY0
メガネじゃなくて焼き鳥だよ
158動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/17(日) 05:40:51ID:lm+sDkRx0
おまえら日曜の朝から2chかよwwwww
2005/04/17(日) 05:57:46ID:9BDtAuHE0
>>158
2005/04/17(日) 06:17:23ID:IlovCqbM0
>>158
定期乙
2005/04/17(日) 06:37:32ID:jmnIn4tc0
2ちゃんねるだけではなく、他の掲示板でも起こりそうな予感。
162ひろゆき@どうやら管理人 ★
垢版 |
NGNG
210.135.97.178 (p2.razil.jp)
210.135.97.180 (ir04.razil.jp)
これも通しで御願いしますー。
163動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/17(日) 07:02:17ID:6D4SK2qE0
ひろゆき早起きだな
164ひろゆき@どうやら管理人 ★
垢版 |
NGNG
>>103
電車男の恩恵ってやつで。
2005/04/17(日) 07:07:19ID:cPqytKs80
>164

衝撃の事実発覚だったりw
今度入るスイッチ群は「train man」って名前にしないといけないですね(違
2005/04/17(日) 07:07:21ID:jz6ovPuT0
>>164
どのくらい儲かったんですか?>電(ry
2005/04/17(日) 07:07:54ID:wu8u7pck0
管理人にも入るんだ
それって著作権料になるん?
2005/04/17(日) 07:16:13ID:wbXeX7rA0
2ちゃん発のヒット作、2匹目はあるか

電車男て元々どの板で書かれてたんでしだっけ?(素)
毒男?鉄道?
169動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/17(日) 07:16:36ID:UJB8JhIT0
>>164
それで良いのか?
2005/04/17(日) 07:20:43ID:aAjFkZsN0
>>168
毒かな?もしかしたら喪かも。当時、喪があったかわからんけど
ぷらすやら電車やらでひ(ryの人にも結構金が入ってるんだな
■ このスレッドは過去ログ倉庫に格納されています
5ちゃんねるの広告が気に入らない場合は、こちらをクリックしてください。

ニューススポーツなんでも実況