クローラー＆過剰リロード対策スレ2【新バーボン】

[1 ｒｅｆｆｉ@報告人 ★ 2005/04/16(土) 19:30:22 ID:???0]

現状把握が困難なので前スレ参照してください。

前スレ
クローラー＆過剰リロード対策スレ
http://qb5.2ch.net/test/read.cgi/operate/1113508190/

[119 94 2005/04/17(日) 00:36:29 ID:BczC5RBSO]

>>111
あう。。。
書いてる間に。携帯書きにくい(´・ω・`)

しばらく接続できてなかったので、また全スレ舐めちゃったんだと思います＿|￣|〇

[120 root▲ ★ NG NG]

>>65
1回ですね。
だから、バーチャルホストを2つ入れるのは、実はあんまりやりたくなかったり。

[121 root▲ ★ NG NG]

>>85
> 1 morningcoffee　2 news4vip 等の板名と

今までの仕組みでひっかかった(過剰な投稿、過剰なスレ立て)。

> 5 BBON.news18.846 6 BBON.news19.453 等の鯖名の違いは何？

今回の仕組みでひっかかった(クロール、過剰なリロード)。

[122 のいぽー（本物） ◆News/n6/H2 2005/04/17(日) 00:41:20 ID:9BDtAuHE0]

>>102
や、俺様個人などは大した問題じゃないでしょう。
設定ファイルが壊れて多数の人がqbを見られなくなったりとかさ。そう言うの。

>>109
確かに一理あるな。。

[123 94 2005/04/17(日) 00:44:08 ID:BczC5RBSO]

>>117-118
了解しました

[124 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 00:45:18 ID:VZ/vTLMV0]

>や、俺様個人などは大した問題じゃないでしょう。
何をおっしゃっておられるのですか。
のいぽー様は2ちゃんの導きの光なのです。

[125 ◆BFzK/mtqM2 2005/04/17(日) 00:46:43 ID:Zg2YkisA0]

root★さん

メール出しました

[126 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 00:51:10 ID:lwM/vvCG0]

すごい
12 BBON.pie.4620 　 218.47.3.125 (i218-47-3-125.s04.a023.ap.plala.or.jp) 89

4620 だって

[127 root▲ ★ NG NG]

落ち着いてきたみたいなので、
問題なければ、今後自動チェック対象サーバを増やしていこうかと考えています。
bbspinkは私も脳内予想少ししてましたが、やはりクローラーさんがかなりいるみたいですね。

live系(サーバの安定より連続リロード優先、ただし落ちても文句言わないこと)と
ex10(news4vipがある最重要サーバ)以外には、入れようかなと。

>>125
どもです。受け取りました。
食事おわってから、徐々に返事しようかと。

[128 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 00:56:00 ID:lwM/vvCG0]

>>127
>今後自動チェック対象サーバを増やして
！！！

まだだったのか

>92 にあるやつはどうなった？

[129 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 01:04:22 ID:hkDHif/H0]

rootたんは一体いつ寝てるんだろう

[130 85 2005/04/17(日) 01:07:46 ID:0AlSQIPu0]

>>121
THX!

[131 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 01:07:54 ID:lwM/vvCG0]

>>129
rootたんは休み無く働いてます

4 BBON.pie.4620 　 218.47.3.125 (i218-47-3-125.s04.a023.ap.plala.or.jp) 106
36 BBON.hobby7.1587 　 220.10.180.234 (YahooBB220010180234.bbtec.net) 16
1000越えはこれだけか・・・

10000を超えるつわもの（←なぜか変換できない）かも〜ん

[132 root▲ ★ NG NG]

>>129
さっきまで、よく寝てましたよ。
今日は某自然教育園に行ってきたので、相当いい気分転換になったです。

PIE立ち上げたりHEから撤退してたりしたあの頃に比べれば、それほどでもないし。

[133 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 01:13:01 ID:biU9cvGZ0]

>>132
科博のかなぁ・・・

[134 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 01:15:17 ID:lwM/vvCG0]

>>132
国立科学博物館付属 自然教育園
ttp://www.ins.kahaku.go.jp/

上野？

[135 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 01:16:54 ID:fId142gb0]

白金かも

[136 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 01:19:40 ID:0s1tpt240]

>>132
iMona.netは固定IPだそうですので除外お願いします
http://pc7.2ch.net/test/read.cgi/pc2nanmin/1110366452/162

[137 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 01:30:53 ID:wSxGeDMY0]

>>134
科博は上野だけど、附属自然教育園は白金。

[138 帰ってきた100円札マン ◆100enpax7E NG NG]

rootさんって本業は何なんだろう・・・。

[139 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 01:58:36 ID:dZJX22h+0]

プロ飛行機の乗客

[140 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 02:09:12 ID:MbzKq1VW0]

>>138
たぶん鯖の中の人だよ
調子がおかしくなると外に避難してくる

[141 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 02:44:35 ID:isJ1G8NUO]

>>139
ﾜﾛｼw

[142 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 02:52:34 ID:rL1TqAGP0]

こんなん導入されたのか。
これ以前に永遠のバーボンだったとことか解除はされる？
xreaで取得さえバーボンな鯖に当たって困ったんだよね。
subject.txt拾いたいだけだったのに。

[143 root▲ ★ NG NG]

>>142
永遠バーボンなところは、前から継続していくつかあるです。
最近ではこことか。

# cybernavi 219.113.228.248/29
# http://qb5.2ch.net/test/read.cgi/operate/1103455176/730
deny from 219.113.228.248/29

身に覚えがないのに永遠バーボンだった場合は、報告いただけると。

[144 さくら♀ ◆iMona7m46s 2005/04/17(日) 03:07:25 ID:56b7U8U70]

＞これ以前に永遠のバーボンだったとことか解除はされる？ 

契約したサーバが運悪くバーボン鯖で、お金をドブに捨てちゃった人おおいですからねぇ。。。

[145 さくら♀ ◆iMona7m46s 2005/04/17(日) 03:10:15 ID:56b7U8U70]

>>143
ついでですから、報告。

iMona@z4鯖
ttp://imona.zzzz.jp/

永遠バーボンだと思うのですが、当時iMona住人で調べても情報が出てこなかったﾃﾞｽ。

[146 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 03:11:04 ID:hkDHif/H0]

XREAとかは公開p2でごっそり焼かれた口じゃね？その後まるごとdenyしたんだっけ？

[147 曳手 ◆p0EQVAkyss 2005/04/17(日) 03:19:42 ID:muWLya3B0]

ところで、みなさんは巡回で引っかかったことはありませんか？
もしくはどんなペースで巡回してますでしょうか。

私はかちゅ〜しゃで2〜3日に1回巡回してますが…。

[148 root▲ ★ NG NG]

ねむい、、、さすがにちょっとへろへろかも。

>>125 の返事は、明日あらためて出すです。

[149 [―{}@{}@{}-] FOX ★ NG NG]

よっ

[150 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 05:07:48 ID:jz6ovPuT0]

>>149
おはよーございますﾉｼ

[151 ◆yadoQ//n/E 2005/04/17(日) 05:08:57 ID:fpZfkbei0]

ネギマがあるとなかなかさまになりますね、お疲れさまでした。

[152 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 05:12:20 ID:isJ1G8NUO]

>>148
おやすめなさい
>>149
その名前は昨日のｱﾚのままかい?

[153 [―{}@{}@{}-] FOX ★ NG NG]

変身

[154 マァヴ ◆jxAYUMI09s NG NG]

ルータは再起動しないですか(^_^;)そうですか

[155 [―{}@{}@{}-] FOX ★ NG NG]

このままで行こうかと、

[156 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 05:30:20 ID:6D4SK2qE0]

糞狐のその変な眼鏡みたいなの何なの？

[157 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 05:33:29 ID:siUU98lY0]

メガネじゃなくて焼き鳥だよ

[158 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 05:40:51 ID:lm+sDkRx0]

おまえら日曜の朝から2chかよｗｗｗｗｗ

[159 のいぽー（本物） ◆News/n6/H2 2005/04/17(日) 05:57:46 ID:9BDtAuHE0]

>>158

[160 FlashLight ◆f.lightAf6 2005/04/17(日) 06:17:23 ID:IlovCqbM0]

>>158
定期乙

[161 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 06:37:32 ID:jmnIn4tc0]

２ちゃんねるだけではなく、他の掲示板でも起こりそうな予感。

[162 ひろゆき＠どうやら管理人 ★ NG NG]

210.135.97.178 (p2.razil.jp)
210.135.97.180 (ir04.razil.jp)
これも通しで御願いしますー。

[163 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 07:02:17 ID:6D4SK2qE0]

ひろゆき早起きだな

[164 ひろゆき＠どうやら管理人 ★ NG NG]

>>103
電車男の恩恵ってやつで。

[165 ◆Reffi/bQ.c 2005/04/17(日) 07:07:19 ID:cPqytKs80]

>164

衝撃の事実発覚だったりｗ
今度入るスイッチ群は「train man」って名前にしないといけないですね（違

[166 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 07:07:21 ID:jz6ovPuT0]

>>164
どのくらい儲かったんですか？＞電（ｒｙ

[167 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 07:07:54 ID:wu8u7pck0]

管理人にも入るんだ
それって著作権料になるん?

[168 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 07:16:13 ID:wbXeX7rA0]

２ちゃん発のヒット作、２匹目はあるか

電車男て元々どの板で書かれてたんでしだっけ？（素）
毒男？鉄道？

[169 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 07:16:36 ID:UJB8JhIT0]

>>164
それで良いのか？

[170 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 07:20:43 ID:aAjFkZsN0]

>>168
毒かな？もしかしたら喪かも。当時、喪があったかわからんけど
ぷらすやら電車やらでひ（ryの人にも結構金が入ってるんだな

[171 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 07:22:15 ID:T7RNtoQL0]

おれのPCにネタがたくさんあり本を出せるが編集できない
　半角板　・・・裏多数で無理
　ハングル板；；；面白いが売れまい
　運営板；；；専門すぎ　散漫でうれない
　ブログ板；；；ひろゆき、ほりえもん本出し済
　

[172 FlashLight ◆f.lightAf6 2005/04/17(日) 07:32:53 ID:IlovCqbM0]

電波男と痴漢男の出版停止してくれよ

[173 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 08:43:51 ID:P+B2QSaV0]

なんでひろゆきに金が入ってんだ？てかあんまり出してると２番煎じ状態で売れなくなると思うが

[174 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 08:47:58 ID:d0P1HPKw0]

電車男がネタだという人は騙されやすい。
http://qa.2ch.net/test/read.cgi/argue/1105042129/l50

[175 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 09:12:16 ID:jGDI/YA70]

ばーぼんったかもorz
調子に乗りすぎた…

[176 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 09:47:48 ID:hkDHif/H0]

>>169
せっかく還元してくれてんのに

[177 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 10:38:36 ID:zhE1YO060]

いまは電車男でも痴漢男でもねぇ、
　お　ぱ　ん　ち　ゅ　先　生　が熱いぜ！

[178 root▲ ★ NG NG]

>>162 了解です。

電車男に支えられる携帯サーバ環境ってことで。

[179 root▲ ★ NG NG]

全サーバ、自動チェック有効にしてみるか。
(live系とex10を除く)

[180 root▲ ★ NG NG]

これで全部かしら。< ライブな掲示板サーバ

2chplus
aa5
academy3
book3
bubble3
comic5 comic6
etc3 etc4
ex9 (ex10)
food6
game9 game10
hobby5 hobby7
human5
life7
(live14) (live15) (live16) (live18) (live19) (live20)
love3
money3
music4
news18 news19
off3
pc7 pc8
qa
qb5 qb6
school4
science3
society3
sports7
that3
tmp4
travel2
tv6 tv7

[181 root▲ ★ NG NG]

dso があるですね(追加済み)。

[182 root▲ ★ NG NG]

で、リストが大きくなりすぎていまいちな場合は、これを入れるっていう戦略かなと。

【Project peko】2ch特化型サーバ・ロケーション構築作戦 Part17
http://qb5.2ch.net/test/read.cgi/operate/1107376477/834

[183 ▲ 某ソレ511 2005/04/17(日) 12:42:34 ID:n90Awt5H0]

>>180-181
PIE上の分は、おそらくそれで全てだと思いますー。。

[184 root▲ ★ NG NG]

前スレからの事項(チラシの裏メモ)

・gala.jp のIPアドレスはバーボン除外リストに入れるべきか? ＞ひ（りゃ に要確認
・ex9 にはバーボンシステムから .htaccess が配られていないかも ＞おじさんに要確認
・Range: bytes=0- で全datをリターンコード206で取れるので、206はあまり軽くできない
・みみずんさんは今(400にしてから)もひっかかるのだろうか
・blackgoatの公開実験を、まずはcの中の人たちとすすめる
・上記がうまくいくようなら、外のひとたち(もし協力いただけるならiMona中間サーバの人とか)とも徐々に
・CustomLog |/path/to/watch combined のようにパイプでログ情報を渡すといいかも

[185 P061198253137.ppp.prin.ne.jp 2005/04/17(日) 13:12:18 ID:nYPmkCZb0]

ちょっとテスト

[186 動け動けウゴウゴ２ちゃんねる NG NG]

規制くらうとインターネット接続すらできなくなるのは仕様？

[187 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 14:15:36 ID:Gr2gLgCS0]

それはバーボンじゃなくて普通の規制でプロバイダに解約されたんじゃないのか

[188 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 14:47:50 ID:0AlSQIPu0]

うはｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗ

[189 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 14:53:34 ID:KEq2K98y0]

ふと思ったのだが、このシステムは
企業やプロ市民団体とかの組織的だった工作活動が自動迎撃される予感。

新聞とかＴＶとかでどっかの会社やプロ市民団体のDQN行為が記事になる。
　　　↓
２ちゃんで祭りになってスレが建ちまくる。
　　　↓
その団体がバイトを使って世論誘導の組織的工作を開始。
スレがその団体を擁護するレスで埋まりだす。
　　　↓
当該スレをバイト達がリロードしまくり。
　　　↓
バ　ー　ボ　ン　発　動　！
　　　↓
工作員達、アク禁になったのでｼｮﾎﾞｰﾝ。
　　　↓
http://qb6.2ch.net/_403/c403.cgi にアク禁のログが
残っているのが発見されてさらに祭りになる。


なんて素晴らしいシステムなんだ（ｗ

[190 root▲ ★ NG NG]

>>184
> ・gala.jp のIPアドレスはバーボン除外リストに入れるべきか? ＞ひ（りゃ に要確認

40BBON.music4.446　 210.131.159.225 (ss2ch.em.gala.jp) 13

やはり、除外リストに入れたほうがよさげね。
ピンポイントで除外リストに入れておきます。

[191 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 15:19:33 ID:s4SCNplx0]

１０分ぐらいで解除されたんだが、手動？

[192 root▲ ★ NG NG]

>>191
なーんも、してない。(観察はたまにしてるけど)

[193 あ ψ▼ 2005/04/17(日) 16:16:39 ID:C4HspXKOO]

これはclassicや他の携帯ブラウザにも適用されるんだよね＞ﾊﾞﾎﾞｰﾝ

[194 未承諾広告※ ◆TWARamEjuA 2005/04/17(日) 16:38:56 ID:wy17oVLR0]

バーボン入り記念真紀子（泪）＠おそらく2ch鯖監視係。

[195 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 16:44:18 ID:1NIbLBPS0]

>>194
ああだから、missedになってるんですね・・・
いろんなところに弊害が出てますな。

[196 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 16:47:04 ID:I8TCHseX0]

自分もなんですけど4時ちょうどに大量にリストされてるのが気になる

[197 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 16:52:56 ID:VXNbvx2O0]

どうも狼住人です
即死回避で連投してたら規制されましたorz
こんなの初めてだorz

[198 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 17:02:29 ID:n/rNCALH0]

連投できないex10に価値はありますか

[199 某47 ◆ap/yuix/tw NG NG]

>>197
ex10サーバーはまだ対象外
その規制はこのスレではない

[200 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 17:08:53 ID:VXNbvx2O0]

>>199
えっ？
↓に自分のIPあったのですが・・・

■自分が規制されたか知りたい
ここに自分のIPがあったら規制されてます
http://qb6.2ch.net/_403/c403.cgi

[201 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 17:14:30 ID:VXNbvx2O0]

そういやBBONとは書いてませんからねー
モロ厨丸出しですな
では失礼しました

[202 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 17:29:13 ID:lwM/vvCG0]

>>197
この辺？

73 news4vip 　 61.86.159.78 (dsl020-078.kcn.ne.jp) 37
74 news4vip 　 222.151.13.72 (i222-151-13-72.s02.a014.ap.plala.or.jp) 37

[203 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 17:30:38 ID:fId142gb0]

>>202
狼

[204 ◆MiMIZUNCjA 2005/04/17(日) 17:46:41 ID:zU2OjysD0]

>>184
＞みみずんさんは今(400にしてから)もひっかかるのだろうか

引っ掛かっています・・・。ごめんなさい。
取得済みのファイルは*.datをHEADでチェックしたあとにファイルサイズが異なればGETしているのでそれで負荷が倍になっているのかもしれません。
HEADに1秒のウェイトを入れてみたけど変わるわけも無くバーボン入りです。
昨日は3745なんて数字出したので相当に負荷をかけています。すいません

あ、そうそう昨日はバーボンでも*.datの取得はできましたがもうできませんね。。。

[205 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 17:48:40 ID:n/rNCALH0]

218.227.33.80 (eAc1Ads080.tky.mesh.ad.jp)
60.34.38.175 (i60-34-38-175.s02.a006.ap.plala.or.jp)　←たぶんこっち

[206 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 17:55:24 ID:dedmGuCP0]

IF-MODIFIED:だっけ？

[207 未承諾広告※ ◆TWARamEjuA 2005/04/17(日) 18:01:00 ID:CB4g6Hor0]

一切巡回が出来ないのが辛いかもかも（哀）

でも生串みっけたのでえへへ♪

[208 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 18:06:00 ID:rZX0OT0xO]

12時頃iMONA復活したと思ったらまた使えなくなってるのは仕様ですか

[209 ひろゆき＠どうやら管理人 ★ NG NG]

galaはスルーしてくださいー。

[210 ひろゆき＠どうやら管理人 ★ NG NG]

210.131.159.128/25,210.249.156.128/26
だそうですー。

[211 讃岐 ◆IamaVIPdCI NG NG]

ひろゆきﾜﾛｽｗｗｗ
遅刻するなよｗｗｗ

[212 讃岐 ◆IamaVIPdCI 2005/04/17(日) 18:15:16 ID:hkDHif/H0]

誤爆すまん

[213 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 18:15:24 ID:+1ALuvXa0]

>>209-210
CNNにVIPPERが投票して逆転しましたよ

[214 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 18:16:22 ID:UXcOyVma0]

VIPPER
空気嫁。

[215 あ ψ▼ 2005/04/17(日) 18:17:48 ID:C4HspXKOO]

これはUAは関係無くIPを規制されるのか？

[216 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 18:28:02 ID:lwM/vvCG0]

>>204
If-Modified-Since か Range を使えばいいよ (HEAD やる必要なし)

一番効率的な方法はレス数を管理すること
subject.txt からレス数とdatファイル名・スレタイを取得

前回取得したレス数との差分で大きかったらdat取得 (マイナスになったら「(レス or スレ自体の)あぼ〜ん」 or 「スレスト」)

こっちは
スレ立て日時(=ファイル名)　取得済み　現在　前回取得　差分　スレタイ で管理
1113323045　141　179　141　38　激エロ動画補完所 10
1112901029　307　457　307　150　【蕾開花】アナルスレ17【春真っ盛り】
1113223560　170　210　170　40　【ｲﾝ】子供同士でえっちしちゃってる画像27【ﾋﾟｵ】
1105276894　744　754　744　10　いでじゅうのエロ画像激しくキボンヌ 3
1111297637　428　467　428　39　現在のあれ以外の何かの数→
1106990883　265　275　265　10　『詳細スレ』運営スレ Part4
1111992619　284　299　284　15　【警視庁】ドキドキまあちゃんゲーム【問題４】
1113644492　5　23　5　18　すじ Part21
1111850162　310　341　310　31　フェラチオ画像11
1113680782　　10　　10　サモンナイトの萌え画像スレPart16

[217 動け動けウゴウゴ２ちゃんねる 2005/04/17(日) 18:32:28 ID:hkDHif/H0]

なにそのスレ達

[218 root▲ ★ NG NG]

>>209-210
Roger.