クローラー&過剰リロード対策スレ
■ このスレッドは過去ログ倉庫に格納されています
最近、頻発しているクローラーや過剰リロード対策スレッドです。 ★FAQ ■クローラーや過剰リロードとは? ・ツール等を使って板のスレッドを根こそぎDLする行為をクロール行為と いいます。 クローラーとはクロール行為をする人の事です。 ・過剰リロードとは文字通り過剰にリロードをしてsubject.txt等を取得 する行為です。 ■どうして迷惑なの? クロール行為や過剰リロードは鯖に過剰な負担をかけるため、最悪、鯖落ち する危険があります。 ■やったらどうなるの? 発見されて悪質な場合は規制情報板に掲載の上、該当プロバイダに通報 されます。 もしも先方が対応しなかったり、再発するような場合は .htaccessで denyする場合もあります。 ■.htaccessでdenyされるとどうなるの? .htaccessでdenyされると書き込みはおろか閲覧すら出来なくなります。 より公平にしたい場合は、アクセス回数の代わりに(応答サイズ + 一定値)の和かなあ。 mod_bwshareっていうのがあるらしいけどどんな感じだろう? >>40 帯域制限系は、今のところしたくないっすね。 はけが悪くなるし、ここはダウンロード主体じゃないし。 同様の理由によりmod_limitipconnも、ちといまいちかと。 というか、mod_bwshareって、接続回数でも何かトリガを引けたりするのかしら。 http://www.topology.org/src/bwshare/README.html BW_tx1cred_rate: sets the maximum rate of serving files (files/second). BW_tx1debt_max: sets the maximum files to serve in excess of BW_tx1cred_rate (files). BW_tx2cred_rate: sets the maximum rate of serving bytes (bytes/second). BW_tx2debt_max: sets the maximum bytes to serve in excess of BW_tx2cred_rate (bytes). ほう。上2つ、おもしろいかも。 http://www.netnice.org/pukiwiki-e.php?mod_bwshare ・status 200でエラーメッセージを返すらしい ・ホワイトリストは書けないっぽい ・httpdのパフォーマンスが1割ぐらい下がるらしい ちと、微妙すね。 >>41 >うほ、mod_bwshareで帯域制限できるんですね。 >一定のリクエスト越えると拒否する機能しかないと勘違いしてた…(汗 (コピペ) 遅かった… >>44 ありゃー。 ライセンスゆるそうだから改造はありかもだけど。(誰が?) >>48 むしろ「クロール200m予選 一番のコース、deny」とか?wwwwwww >>50 何を言っているんだ。 この板では言い出しっぺの法則が適用されるんだぞ? 過剰アクセスかわからないんですけど18時頃にgame9のbbs.cgiアクセス数が急激に上昇 しています。 ※そろそろ監視員募集したい今日この頃 >>54 ヒント:NEETもしくはVIPPER(違 >>56 詳しく 急激に上がった時だけメールで知らせるとか。 24時間監視は大変でしょうし。 >>58 うはwwwwwwねーypwwwwwwwww まぁお前は24時間いるようだけどなwwwwwwww >>54 >※そろそろ監視員募集したい今日この頃 言い出しっぺが(以下ry >>59 祭りだった場合はどうする? >>39 >(206や304を含めるかどうかは要検討) これは 200 - 10 point 206 - 5 point 304 - 1 point 416 - 1 point 上記以外 0 point で、x = 3600 だった場合 19800 point でdeny 始めのうちは x = 1800 にして 19000 Point over( 1リクエスト/secは除外する) だったらdeny >21-22 おつかれまです。警告出しました。 規制@全サーバ No.2 http://qb5.2ch.net/test/read.cgi/sec2ch/1095552678/199 2005/04/15(金) 22:06:25 .dy.bbexcite.jp (警告) おじさんは、叩かれる快感を知ってるからなぁ。 え?私? なにもなければつまらないと思うけどなぁ・・・・(^_^;) いや、一般的にはなんもないほうがいいんだけど ん? 誤読していた? やられるのは私? 206.223.152.90 って BlackGoat でしたっけ? もう一つあったっすよね? IP 知ってますかー >>69 もうちょっとで出来るので cron で 10分おきによんでくださいー 詳しくはまたあとで書きます blackgoat3.2ch.net 206.223.152.90 blackgoat4.2ch.net 206.223.152.95 ですな(^_^;) >>75 株式会社ジェンマエンジニアリング らしいですけど… 210.135.98.0/24 で >73 razil.jpやね(^_^;)多分、75もそう tuttle.razil.jp find.2ch.net [210.135.97.29] a. [IPネットワークアドレス] 210.135.97.0/24 b. [ネットワーク名] BARTOK-NET f. [組織名] 株式会社ジェンマエンジニアリング g. [Organization] Gemma Engineering 210.135.98.0/24も同じなのでrazilで確定かとー みみずんさんと肉ちゃんねるさんところはきっとひっかかるね(^_^;) 引っかかったら申し出てもらう方向で大丈夫かな? (滝汗)。。。 ぶっこ抜きのIPをBBQみたくですか。。。 なんか 途中で設定変わったような。。。 @game9 気のせいかしら、 >87 おお 稼働開始ですか しかし、開始早々4人もバーボンって(苦笑 ※どのサーバーであったかは記載しないんですか? >>89 ちと頑張ってみる まだ手動なので root ★さんに cron で読んでもらう予定 (ネット環境の無いところで閲覧するため) 2chブラウザで「手動で」マウスを連打してdatをまとめて落とす (同時接続最大3スレ)ような場合でもNGですか? NG datを落とすのは、一時間に一ファイルまでにしてください。 しかし、2chブラウザの機能で自動的に引っかかる人が出てくる悪寒 >95 razil系はまとめてパスするようになったんでないかな?(^_^;) ゲートウェイを使ってグローバルIPを共有しているようなサービス(leo-netとか)は あっというまに焼かれそうやね(^_^;) マイナーISPならそれほどアクセス数多くならないんじゃないか。 悪いのは明らかにglobalIPを共有してる側なんだから 良いんじゃないですか?よく言うじゃないですか。 ひろゆきが止めるまでは突き進め、と。 なんか繋ぎ変えて即バーボンにされた人間が居るのはキノセイでしょうか(苦笑 ってこれIP違ってるけど通報済みだったような。。。 ところで>>87 の値って目安としてはどの位なんですか? >>103 そういうことは、自分で試してみるのがいちばん・・・ うは live20にも投入ですか(汗 実況鯖はリロードしまくってる香具師多そうだから犠牲者続出の悪寒 うわ、domoさんが引っかかってる(汗 banana710.maido3.com www.domo2.net [206.223.151.190] gs199-125.toshima.ne.jp CATV? http://www.toshima.co.jp/html/internet_f.htm プライベートアドレスなんかグローバルアドレスなんかよくわからん。 gsって げーとうぇいさーばー の略かなあ。 γ/( ( こ)) -= ( //(从从) -=≡ |∂#゚Д゚)リ 実況サロンからきねんぱぴこ♪ -=// つ┯つ ttp://jikkyo.sakura.ne.jp/test/read.cgi/livesaloon/1113546506/500 -=≡ノ i(ヽ田/r -=≡ U /U -= (◎) ̄)) また実況いじめか!わらってんじゃねー! 自動リロード機能ついてる2chブラウザがあるし このくらいなら大丈夫という目安知りたいな その値を探すユーザーは出てくるだろうし最低値が 既存のブラウザの設定より下だった場合、今のところ良心的に 自動リロード間隔を上げてるユーザーが値を下げかねん つうことでかなり鯖読んで公表したほうがいいんじゃない >>117 教えてあげよう 自動リロード機能使っちゃだめ なんというか、常識的な利用をしていれば 気にする必要は無いのかどうか、 が知りたいですよね。もっとも「常識的な利用」に かなり個人差があるわけだが。 >>117 教えたらギリギリの所で止められるからな、、 まあ、どの位が危ないのかは知りたいけど。 >>122 まあ別に2chブラウザのほうでユーザが 設定できるようにすれば、いずれはぎりぎりのところで とめるユーザばかりになるけどね 日 凸 ▽ ∇ U ≡≡≡≡≡≡≡ ∧ ∧ / ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ U ∩ [] % 曰 (゚Д゚ ;) < 客大杉だ、ゴルァ! _________|つ∽)_ \_____________ ――――――――――― ━┳━ ━┳━  ̄ ┻  ̄ ̄ ̄┻ ̄ ̄ ̄ ̄ BBON.etc4 219.113.242.218 (usen-219x113x242x218.ap-US.usen.ad.jp) BBON.live15 219.113.242.220 (usen-219x113x242x220.ap-US.usen.ad.jp) http://i.i2ch.net/ 219.113.242.218 http://i2ch.net/ 219.113.242.220 引っかかってるみたい ■ このスレッドは過去ログ倉庫に格納されています
read.cgi ver 07.5.1 2024/04/28 Walang Kapalit ★ | Donguri System Team 5ちゃんねる