クローラー＆過剰リロード対策スレ

**ｒｅｆｆｉ@報告人 ★** · 2005/04/15(金) 04:49:50

最近、頻発しているクローラーや過剰リロード対策スレッドです。

★FAQ

■クローラーや過剰リロードとは？
・ツール等を使って板のスレッドを根こそぎＤＬする行為をクロール行為と
　いいます。
　クローラーとはクロール行為をする人の事です。
・過剰リロードとは文字通り過剰にリロードをしてsubject.txt等を取得
　する行為です。

■どうして迷惑なの？
　クロール行為や過剰リロードは鯖に過剰な負担をかけるため、最悪、鯖落ち
　する危険があります。

■やったらどうなるの？
　発見されて悪質な場合は規制情報板に掲載の上、該当プロバイダに通報
　されます。
　もしも先方が対応しなかったり、再発するような場合は .htaccessで
　denyする場合もあります。

■.htaccessでdenyされるとどうなるの？
　.htaccessでdenyされると書き込みはおろか閲覧すら出来なくなります。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 09:13:40

>>595
300なら十分処理できてるから到達してる
念のため0.6秒間隔で100連撃ったけどバーボンかからない
もしかしてttp://news18.2ch.net/bizplus/じゃだめなのかな？

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 09:16:31

>>596
219.113.242.220
↑このIPはクラシックテスト１(i2ch.net)とテスト２(t2.i2ch.net)で共有してるのでひっかかりやすいのではないかと。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 09:18:04

専用ブラウザのtwintail v2.0 beta30でお気に入りを巡回した

>>451にならうと
1) どのサーバで引っかかったですか?
news18
2) どれくらいの時間内にどれくらいのファイルにアクセスしたですか?
　　つまりスピード、
・不明、目測でよければ1秒で1スレくらい？
・適当にニューススレを取得しているのでnews18だけで100は超えていると思う
・2ch全体ならお気に入りスレは500を超えている
・ちなみに板ごとにお気に入りスレを分けているので
　芸スポ+・ニュース議論・ビジネスnews+などのスレを連続で
　巡回していることになる

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 09:18:39

自分なら、
体感だと
1アクセス/5秒かなり待たされる感じ
1アクセス/3秒ちょっと引っかかる感じ
1アクセス/1秒待ちなし
なので
300アクセス/10分(=1アクセス/2秒)ぐらいを閾値に設定するかなぁ。
(クローラ対策なら600アクセス/10分でもいいと思うけど。)

**root▲ ★** · NG

219.113.242.218 219.113.242.220 の2つを除外リストに一時的に足しました。
あくまで一時的な処置ということで。

今バーボンに入っているやつは、はずし方を知らないです。
タイムアウトを待ってください。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 09:21:18

>>600
>・不明、目測でよければ1秒で1スレくらい？
これについてはあまりあてにしないでね・・・

**root▲ ★** · NG

>>598 >>600 とも、
撃つ数の問題っすね。
いくつかは、「ひ・み・（りゃ」なので、言いませんが。

とりあえず10分で10000発連撃すれば、絶対ひっかかります。

**root▲ ★** · NG

まとめ

今自動起動しているサーバの一覧 >>574
ひ（りゃからの提言 >>576-583
連絡ください >>597

もうげんかいっす。いったんおふらいん。むぎゅー。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 09:29:16

お疲れさま
つ[俺の尿]＜これでも飲んで

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 09:29:49

>>605
乙ーﾉｼ

つ[さくら餅]

**ｒｅｆｆｉ@報告人 ★** · 2005/04/16(土) 09:31:59

>605
乙です～～

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 09:36:14

0.5間隔*5窓を1分続けても規制されなかった
F5砲対策には問題があるような気がする

◆yadoQ//n/E · 2005/04/16(土) 09:37:05

>>605
朝遅くまで乙でしたー。

**root▲ ★** · NG

>>609
気になるなぁ。

news18だっけ。
ログみてみます。ここで、fusianasanできますか?

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 09:38:09

>>605
root乙

**root▲ ★** · NG

だめだ、限界っす。

できるなら、fusianasanしておいてください。あとで調べてみるので。
事情によりできないなら、特に問題ないです(調べようがないだけ)。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 09:42:10

とりあえずネロ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 09:43:30

>>613
つ[まくら]

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 09:44:15

>>613
乙
(　ﾟ∀ﾟ)つ[俺の尿]
あのあとDoS同然の更新かけたらバーボンに引っかかりましたヽ(´ー｀)ノ
IPは申し訳ないんですが今晒すと大変なことになるので勘弁を

**root▲ ★** · NG

>>616
りょうかいです。これでとりあえず安心しました。
今寝るとせっかくの土曜があれなので、奥様とどっかにでかけてきます。
ふらふら。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 09:51:44

>>602:root▲ ★さん
219.113.242.220を除外リストに追加したことでバーボンリストに表示されなくなったけど、
バーボン入ってる状態、ホントに解除されますかね？
バーボンリストに表示されないということは解除カウントも停止してるんじゃないの？

**618** · 2005/04/16(土) 09:59:54

i2ch.net(219.113.242.220)でnews18の板が軒並見れないのだけど、
バーボンリストには表示されてないのよね。

**よよよ** ◆EX/mumumu2 · 2005/04/16(土) 10:00:01

「>>618 リストにはちゃんと表示されているようです。」
と言っている人がいます。

**よよよ** ◆EX/mumumu2 · 2005/04/16(土) 10:04:09

17 BBON.life7 　 219.113.242.220 (usen-219x113x242x220.ap-US.usen.ad.jp) 52
(http://qb6.2ch.net/_403/c403.cgi よりコピペ。言われた通りにやりました。)

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 10:04:54

既婚者だったのか…rootさん。

なんというか…いろいろ乙です。
家族サービス、ガンガッテ下さい（というのも変な言い方ｗ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 10:07:01

>>621
＞news18の板が軒並見れないのだけど、

**よよよ** ◆EX/mumumu2 · 2005/04/16(土) 10:07:06

「カウントが120になれば消えていくので大丈夫だと思います。」
「私がいじったところとは独立に動いています。」
だそうです。
カウントと言うのは、>>621にコピペした奴の最後の数字だそうです。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 10:07:22

僕の肛門もクロールされそうです

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 10:09:27

>>624
は～い、わかりました～(・∀・)
(それにしても被るなぁw)

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 10:09:30

BBON.life7 　 219.113.242.220 (usen-219x113x242x220.ap-US.usen.ad.jp) 57

あと1時間ちょいで解除です
それまで待つしかないですな

**よよよ** ◆EX/mumumu2 · 2005/04/16(土) 10:11:17

「リストに載っているうちは、
　全サーバ見るのも駄目な設定になったみたいです。」
「以前は、bbs.cgiだけでしたが、今は全て禁止されるようです。」

「そろそろ、出かけていい？」

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 10:11:59

>>628
いってらっさいﾉｼ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 10:35:44

じゃ実況板以外で実況するよ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 10:38:44

実況を除いたら、ニュー速+、テレビ番組系(アニメ、特撮を含む)、週間少年漫画のネタバレスレ
の速度(勢い)が速いんだけど、この規制を知らない住民はみんな規制に引っかかるかもしれないな

VIPは・・・規制されてもいいや

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 10:39:10

これはstyle、lovely、live2chあぼーん作戦ですか？

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 10:51:13

iMonaに関してはdatやsubject.txtを一定時間サーバー上にキャッシュされるので逆に負荷を
減らしているんじゃないかな。
規制に引っかかる頻度ではあるが、、、。

http://imona.net/からスクリプトDLして見てみれ。
まぁ設定次第で毎回ダウンロードする形にも出来るけど。

**青い風** ◆Wind//YUV6 · 2005/04/16(土) 10:55:33

壷。

◆MiMIZUNCjA · 2005/04/16(土) 10:56:44

（；Д ；)＜バーボンハウス入りになってしまった！
＜　)
　ハ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 10:57:46

>>39,63

実際に今どうなってるのか知らないけど、これって GET の話だよね？
HEAD の 200 は GET の 304 相当の扱いであって欲しい。
ま、検討の結果、206も304も200と区別なしってことならそれはそれだけど。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 11:00:18

>>635
(ﾉ∀`) ｱﾁｬｰ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 11:01:54

31 BBON.game9 　 210.131.159.225 (ss2ch.em.gala.jp) 60
これはいいのか？

確か、ひ（ｒｙ）と契約してるところだった気が・・・

2005/04/16(土) 11:04:15

バーボンハウス入りって●持ってても逃れられないの？

◆MiMIZUNCjA · 2005/04/16(土) 11:05:29

●は通用しません。

**大曽根ライトフライ** ◆/89x1U91uM · 2005/04/16(土) 11:09:45

朝起きたらいきなりﾊﾞｰﾎﾞﾝ逝きとかどないやねん

2005/04/16(土) 11:09:51

なんだってー（AA略

とりあえず解除されるまで串刺して対応すると良さそうだな・・・

**動け動けウゴウゴ２ちゃんねる** · NG

●持ってても引っかかるってのはひどくないか？
って、●もってないおれが言うのもなんだけど。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 11:10:05

ばーぼんてどういう意味なの？
それと例えば↓の例の場合

49 BBON.life7 焼 61.26.134.144 (61-26-134-144.rev.home.ne.jp) 16

この人はlife7の閲覧不可能って事？
焼ってついてるのとついてないのは何が違うの？

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 11:11:04

繋ぎなおしてｸﾞﾛｰﾊﾞﾙIPが変わるﾌﾟﾛﾊﾞｲﾀﾞの奴は繋ぎなおせよ

◆tiffinlc2w · 2005/04/16(土) 11:12:25

>>644
>>314-315
バーボンが解けたら閲覧は出来るとおもう。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 11:14:19

あと、串刺したら閲覧のみ可能だと

**中継局長男** ◆HAMPAMXzMs · 2005/04/16(土) 11:14:41

>>481 >>574
すいません、いつもお疲れ様です。

2005/04/16(土) 11:15:11

万が一でも引っ掛かったら怖いなぁ・・・

**大曽根ライトフライ** ◆/89x1U91uM · NG

朝からいきなりﾊﾞｰﾎﾞﾝ逝きとか舐めとるな

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 11:17:17

>>635
38 BBON.life7 　 218.46.194.240 (EATcf-434p240.ppp15.odn.ne.jp) 26
39 BBON.hobby7 　 202.229.14.2 (ps28.suite2.arena.ne.jp) 26
40 BBON.hobby7 　 219.66.172.45 (FNAfb-05p2-45.ppp11.odn.ad.jp) 26
この辺？

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 11:24:31

wait 2秒でもかかるっと・・・

200 回避方法
Range: bytes=0-

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 11:25:35

知識ないから314に出てくる単語の意味が全然わかんないけど
要は焼印のついてる人は尋常でないアクセス数を稼いだから2時間経っても暫くの間規制対象のままって事かね
ブラックリスト･オブ･ブラックリストって感じなんかな

EATcf-386p109.ppp15.odn.ne.jp ◆MiMIZUNCjA · 2005/04/16(土) 11:26:36

>>651
38の218.46.194.240です。
本日の午前1時頃から10時50分頃までそのIPでした。

10時～10時30分頃にクロールした際のログから取得データを見ていると問題ない様子。
*.datとか取得できていたりするんでしょうか。
かちゅ～しゃ(kage)での閲覧は不可でしたが。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 11:27:51

>>653
BBQされるのは書き込みのほうです。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 11:32:39

ばーぼんが閲覧不可で焼が書き込み不可って意味かな
ありがとう、ｱﾌｫでｽﾏｿ

◆MiMIZUNCjA · 2005/04/16(土) 11:34:49

またバーボン入りになりましたが問題なく*.datを取得できています。（オリジナルの巡回ソフトです）
かちゅ～しゃでの閲覧ができないだけか・・・

**フフンフ** ◆H3WreiI4XI · 2005/04/16(土) 11:41:21

>>87
死ね

**あぼーん推奨：一浪おコテ** · 2005/04/16(土) 11:46:59

http://pc8.2ch.net/test/read.cgi/hosting/1113225020/62
この辺も参照してくれ

◆WMaLhm.gkw · 2005/04/16(土) 11:51:12

>>644
12　BBON.life7　焼　192.168.0.1　(user1-0-168-192.example.com)　39
~~　　　　　^^^^　~~~　^^^^^^^^^^　~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~　 ^^
A　　　　　 B　　 C　　D　　　　　　 E　　　　　　　　　　　　　　　　　　　　F

A　現在バーボンされているもののうち、古い順からの番号
B　バーボンされる原因になった過剰アクセスを行ったサーバ
C　焼マークがあるものは、BBQなどに掲載されているため書けない印
D　IPアドレス
E　ホスト名
F　バーボンされてからの時間（分）　120分で自動解除

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 11:52:19

ていうか、趣味で作った個人サイトごときで何でこんなに必死なの？

別にいいじゃんここいらで終わりでさ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 11:56:53

趣味でプログラムくんでるだけだし。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 12:08:12

仕事なんざに必死になれるかっ

**名無し募集中。。。** · 2005/04/16(土) 12:11:25

とりあえず何秒に１回リロードしたらひっかかるか教えてよ
ずるむけの人

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 12:15:17

>>664
２～３秒に１回でダメだった @game10

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 12:25:42

>>664
串で実験したが、1秒に2回、1分ほど続けてたら入った。

32 BBON.news18 焼 193.188.105.22 (193.188.105.22) 13

**名無し募集中。。。** · 2005/04/16(土) 12:42:50

>>665
>>666
ありがと
むー鯖によって違うのか設定

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 12:55:32

test

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 13:01:43

規制される人って

山田くんが住んでたりしてw

**大曽根ライトフライ** ◆/89x1U91uM · 2005/04/16(土) 13:09:02

ﾌｫｯｸｿいい加減にしろ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 13:16:57

ケーブラーに氏ねと言ってるようなもんだ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 13:18:39

ADS

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 13:30:20

はぁ～ん、ばーぼんﾘｽﾄに入ってしまたよ(*´Д｀*)

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 13:35:15

お忙しい中すみません。
質問です。

お気に入り内にあるライブなスレが全部で60位
1板最大15位（過疎板）
という状態で、お気に入り巡回すると引っかかっちゃうような状況でしょうか？
更新があったスレは全て開くような事になってます。
全部で10スレ位は開くことがあるのですが。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 13:37:12

とりあえず実況板はゆるゆるでお願いしますよ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 13:37:39

>>674
やってみないとわかりませーん

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 13:39:44

実況板でこれはキツイ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 13:45:00

>>676
そですか・・・・orz
ブラウザ変更するです。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 13:45:06

たまに実況板いくけどキターとかばっかでとても読みきれる速度じゃないな
どの道読んでないんだから書き込みOnlyで閲覧不可にすれば少しは負荷減るんじゃない

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 13:45:21

手動で巡回しろよカス共。
2chは喪前等のゲームではない。情報交換掲示板だヴォケ。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 13:45:22

もっと知識のある人に対策ｷﾎﾞﾝﾇ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 13:46:44

>>678
ブラウザ変更しなくても自分で変えれば（ｒｙ

>>679
普通にレスしてる人もいる事を忘れずに

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 13:52:28

>>679
たまに行く人の意見ですね
こちとら主な活動場所が実況ですから

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 13:55:24

ヌー速なんかは記事を読んで面白くなければ次、また次てﾘﾛｰﾄﾞしなければ
情報いれるの遅くなるんですが、、新聞読んでるんじゃないので

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 13:55:42

難しい話はよくわからんのだが携帯ではもう閲覧不可能なのか？朝からずっとみれんのだが。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 13:59:29

>>679
それが慣れると読み切れちゃうんですよ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 13:59:48

>>685
http://c-others.2ch.net/

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 14:00:35

たまにしか実況板を見ない人が、よりによってサッカー実況のときに
覗き見したりすると超高速で無意味なものに見えるのだろう

いつもそんなスピードで流れてるわけじゃないから

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 14:00:44

>>687
ＰＣからだから間違った

http://c.2ch.net/

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 14:10:33

なんらかのエラーとでた。IMONAなんだがもうみれないんだろうか。これが一時的なものかどうかだけでも教えてくれないか。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 14:12:54

>>690
中間鯖の人の対応次第

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 14:20:03

じゃおとなしく待つよ。ありがとう。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 14:21:15

（′∀｀）ﾎﾞﾎﾞｰﾝ！

【厨ｻｲﾄﾟ】いっらしゃい!ボ盆（′∀｀）ﾎﾃﾙｵﾍﾗｸ本日ｵｰﾋﾟﾝ【17ｹﾞﾛｽ】
http://comic6.2ch.net/test/read.cgi/doujin/1109399762/

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 14:24:44

つーか、なぜ公式のｃ.２ｃｈ.ｎｅｔを代用しないのか？＞　アイモナ使い

**東海奴王** ◆tGXPxw/o0U · 2005/04/16(土) 14:31:05

なんかねぇ、IEでは見れるのにJaneでは見れないんだけど。

[―{}@{}@{}-] **FOX ★** · 2005/04/16(土) 14:32:26

どんなもんかな?

指標はこんなもんかな
1) 今回の目的である過度なクロールが撃退できているか?
2) それと同等な人がどれくらいいるか、
3) 除外されるべきものが除外されているか?
4) 各種専ブラのシーケンス(見た目と実際はかなり違うでしょう)
5) 運動不足の解消

**東海奴王** ◆tGXPxw/o0U · 2005/04/16(土) 14:38:38

なんかねぇ、直った。