クローラー&過剰リロード対策スレ
■ このスレッドは過去ログ倉庫に格納されています
最近、頻発しているクローラーや過剰リロード対策スレッドです。 ★FAQ ■クローラーや過剰リロードとは? ・ツール等を使って板のスレッドを根こそぎDLする行為をクロール行為と いいます。 クローラーとはクロール行為をする人の事です。 ・過剰リロードとは文字通り過剰にリロードをしてsubject.txt等を取得 する行為です。 ■どうして迷惑なの? クロール行為や過剰リロードは鯖に過剰な負担をかけるため、最悪、鯖落ち する危険があります。 ■やったらどうなるの? 発見されて悪質な場合は規制情報板に掲載の上、該当プロバイダに通報 されます。 もしも先方が対応しなかったり、再発するような場合は .htaccessで denyする場合もあります。 ■.htaccessでdenyされるとどうなるの? .htaccessでdenyされると書き込みはおろか閲覧すら出来なくなります。 BBON.life7 219.113.242.220 (usen-219x113x242x220.ap-US.usen.ad.jp) 57 あと1時間ちょいで解除です それまで待つしかないですな 「リストに載っているうちは、 全サーバ見るのも駄目な設定になったみたいです。」 「以前は、bbs.cgiだけでしたが、今は全て禁止されるようです。」 「そろそろ、出かけていい?」 実況を除いたら、ニュー速+、テレビ番組系(アニメ、特撮を含む)、週間少年漫画のネタバレスレ の速度(勢い)が速いんだけど、この規制を知らない住民はみんな規制に引っかかるかもしれないな VIPは・・・規制されてもいいや これはstyle、lovely、live2chあぼーん作戦ですか? iMonaに関してはdatやsubject.txtを一定時間サーバー上にキャッシュされるので逆に負荷を 減らしているんじゃないかな。 規制に引っかかる頻度ではあるが、、、。 http://imona.net/ からスクリプトDLして見てみれ。 まぁ設定次第で毎回ダウンロードする形にも出来るけど。 ( ;Д ;)<バーボンハウス入りになってしまった! < ) ハ >>39 ,63 実際に今どうなってるのか知らないけど、これって GET の話だよね? HEAD の 200 は GET の 304 相当の扱いであって欲しい。 ま、検討の結果、206も304も200と区別なしってことならそれはそれだけど。 31 BBON.game9 210.131.159.225 (ss2ch.em.gala.jp) 60 これはいいのか? 確か、ひ(ry)と契約してるところだった気が・・・ バーボンハウス入りって●持ってても逃れられないの? 朝起きたらいきなりバーボン逝きとかどないやねん なんだってー(AA略 とりあえず解除されるまで串刺して対応すると良さそうだな・・・ ●持ってても引っかかるってのはひどくないか? って、●もってないおれが言うのもなんだけど。 ばーぼんてどういう意味なの? それと例えば↓の例の場合 49 BBON.life7 焼 61.26.134.144 (61-26-134-144.rev.home.ne.jp) 16 この人はlife7の閲覧不可能って事? 焼ってついてるのとついてないのは何が違うの? 繋ぎなおしてグローバルIPが変わるプロバイダの奴は繋ぎなおせよ >>644 >>314-315 バーボンが解けたら閲覧は出来るとおもう。 >>481 >>574 すいません、いつもお疲れ様です。 >>635 38 BBON.life7 218.46.194.240 (EATcf-434p240.ppp15.odn.ne.jp) 26 39 BBON.hobby7 202.229.14.2 (ps28.suite2.arena.ne.jp) 26 40 BBON.hobby7 219.66.172.45 (FNAfb-05p2-45.ppp11.odn.ad.jp) 26 この辺? wait 2秒でもかかるっと・・・ 200 回避方法 Range: bytes=0- 知識ないから314に出てくる単語の意味が全然わかんないけど 要は焼印のついてる人は尋常でないアクセス数を稼いだから2時間経っても暫くの間規制対象のままって事かね ブラックリスト・オブ・ブラックリストって感じなんかな >>651 38の218.46.194.240です。 本日の午前1時頃から10時50分頃までそのIPでした。 10時〜10時30分頃にクロールした際のログから取得データを見ていると問題ない様子。 *.datとか取得できていたりするんでしょうか。 かちゅ〜しゃ(kage)での閲覧は不可でしたが。 ばーぼんが閲覧不可で焼が書き込み不可って意味かな ありがとう、アフォでスマソ またバーボン入りになりましたが問題なく*.datを取得できています。(オリジナルの巡回ソフトです) かちゅ〜しゃでの閲覧ができないだけか・・・ >>644 12 BBON.life7 焼 192.168.0.1 (user1-0-168-192.example.com) 39 ~~ ^^^^ ~~~ ^^^^^^^^^^ ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~ ^^ A B C D E F A 現在バーボンされているもののうち、古い順からの番号 B バーボンされる原因になった過剰アクセスを行ったサーバ C 焼マークがあるものは、BBQなどに掲載されているため書けない印 D IPアドレス E ホスト名 F バーボンされてからの時間(分) 120分で自動解除 ていうか、趣味で作った個人サイトごときで何でこんなに必死なの? 別にいいじゃんここいらで終わりでさ とりあえず何秒に1回リロードしたらひっかかるか教えてよ ずるむけの人 >>664 2〜3秒に1回でダメだった @game10 >>664 串で実験したが、1秒に2回、1分ほど続けてたら入った。 32 BBON.news18 焼 193.188.105.22 (193.188.105.22) 13 >>665 >>666 ありがと むー鯖によって違うのか設定 はぁ〜ん、ばーぼんリストに入ってしまたよ(*´Д`*) お忙しい中すみません。 質問です。 お気に入り内にあるライブなスレが全部で60位 1板最大15位(過疎板) という状態で、お気に入り巡回すると引っかかっちゃうような状況でしょうか? 更新があったスレは全て開くような事になってます。 全部で10スレ位は開くことがあるのですが。 >>676 そですか・・・・orz ブラウザ変更するです。 たまに実況板いくけどキターとかばっかでとても読みきれる速度じゃないな どの道読んでないんだから書き込みOnlyで閲覧不可にすれば少しは負荷減るんじゃない 手動で巡回しろよカス共。 2chは喪前等のゲームではない。情報交換掲示板だヴォケ。 >>678 ブラウザ変更しなくても自分で変えれば(ry >>679 普通にレスしてる人もいる事を忘れずに >>679 たまに行く人の意見ですね こちとら主な活動場所が実況ですから ヌー速なんかは記事を読んで面白くなければ次、また次てリロードしなければ 情報いれるの遅くなるんですが、、新聞読んでるんじゃないので 難しい話はよくわからんのだが携帯ではもう閲覧不可能なのか?朝からずっとみれんのだが。 たまにしか実況板を見ない人が、よりによってサッカー実況のときに 覗き見したりすると超高速で無意味なものに見えるのだろう いつもそんなスピードで流れてるわけじゃないから なんらかのエラーとでた。IMONAなんだがもうみれないんだろうか。これが一時的なものかどうかだけでも教えてくれないか。 (′∀`)ボボーン! 【厨サイト゚】いっらしゃい!ボ盆(′∀`)ホテルオヘラク本日オーピン【17ゲロス】 http://comic6.2ch.net/test/read.cgi/doujin/1109399762/ つーか、なぜ公式のc.2ch.netを代用しないのか?> アイモナ使い なんかねぇ、IEでは見れるのにJaneでは見れないんだけど。 どんなもんかな? 指標はこんなもんかな 1) 今回の目的である過度なクロールが撃退できているか? 2) それと同等な人がどれくらいいるか、 3) 除外されるべきものが除外されているか? 4) 各種専ブラのシーケンス(見た目と実際はかなり違うでしょう) 5) 運動不足の解消 >>696 >5) 運動不足の解消 医者に年末までに5kg痩せて95kgになりましょうねといわれた。 ところで*.datのクロールはみみずんさーばーではバーボン行きの現在でも 問題なくできるんですが黒やぎさんって私でも使えるんですか? >>698 >黒やぎさんって私でも使えるんですか? IDとpass発行だって 申請が必要 確か、黒やぎ(squid-proxy)は 差分取得不可(gzip も)だったはず >>698 黒山羊さん使えます〜 もっとも良い方法を選択したほうがいいので どうするかは決定してから実行したほうがよいでーす ううう。黒山羊さんをgoogleで探しているけどよくわかrない。。。proxyなんでしょか。URL教えて下さい。 >>702 あーい。何日か静観してます。 とりあえず、かちゅからJaneViewに移行したです。。 バーボン解除されてから、2〜3回巡回してみた ですけど、とりあえず引っかからなくはなったんですが。 中間鯖(アイモナー鯖)の管理人曰く、 「imonaはユーザー数がかなり多く、この手の規制は回避不能なので様子見する」 とのことです。 >>703 またなった? 53 BBON.life7.1005 210.252.234.153 (EATcf-391p153.ppp15.odn.ne.jp) 2 BBON.life7.1192 の最後の1192の数字はBBON強弱指数です 最初の強さを100として現在200(二倍緩和)です 1192 というのは11.92倍の負荷をかけているということです 指数 100 基準値 200 BBON 発動値 ← 現在 59 名前:EATcf-386p109.ppp15.odn.ne.jp ◆MiMIZUNCjA :2005/04/16(土) 10:55:06 バーボンハウス入りになっていてビビッタ。 2時間で解除されるらしいが7時間は布団に入っていたのになぜ・。 同一固定IPからの読み出しでもダメなん? ということでIP変えて接続中・・・ 60 名前:名無しの報告 :2005/04/16(土) 10:56:35 ID:aRhWdUAx >>59 ついに、みみずんまでかw >>711 45 BBON.news19.726 218.218.14.139 (EATcf-320p139.ppp15.odn.ne.jp) 16 これは許容負荷の7倍強の負荷をかけたと言うことか。 という事は規制されないためには今の巡回方法の1/7の速度/負荷にしろと言う事か。。。 2倍緩和状態なら1/3.5と。 う〜む。 普段何気なく行っていた巡回は中の人からみると相当な負荷になっていたのだな。反省。 昔の「俺様壱号」では2万スレとかを改造かちゅ〜しゃで一度にアクセスしていたからなぁ。。。 ホストを変えまくっていたとは言えサーバの中の人への負荷自体は一緒だからな。 死なされても文句は言えんね。 クラシックのミラーとテスト1なんですが、 >>602 root▲ ★ >219.113.242.218 219.113.242.220 の2つを除外リストに一時的に足しました。 ↑とゆうことだったのですが、バーボンハウスにまた入ってます。 どうゆうこと? 54 BBON.life7.1659 210.252.234.153 (EATcf-391p153.ppp15.odn.ne.jp) 6 1659か。。。うむむむ >>716 ,. -─- 、 / ___丶 ∠. /´ ,.- 、r‐、`| l | | ー | lー | | l. |@`ー' oー' l (\ヽヽ 〜〜〜〜ゝ <にんともかんとも \.ゞ,>nn‐r=< ( / `^^´`ヽハ) /`! ー--=≦-‐1 iria で1スレずつdatを落として 253 か・・・ 57 BBON.life7.3745 210.252.234.153 (EATcf-391p153.ppp15.odn.ne.jp) 9 life7鯖の巡回さえ終われば・・・ これって、同じ数DLする場合 どうせバーボン逝きになるのは確実だから 同時DL(8スレとか)して短時間で終わらせればOKな気がする (当然、DLし終わった後でバーボン) 最速を目指す か なが〜くやるか だな >>708 のアドレスのやつどう使うの? 焼きとかあるけど ■ このスレッドは過去ログ倉庫に格納されています
read.cgi ver 07.5.1 2024/04/28 Walang Kapalit ★ | Donguri System Team 5ちゃんねる