X



クローラー&過剰リロード対策スレ

レス数が900を超えています。1000を超えると表示できなくなるよ。
2005/04/15(金) 04:49:50ID:???0
最近、頻発しているクローラーや過剰リロード対策スレッドです。

★FAQ

■クローラーや過剰リロードとは?
・ツール等を使って板のスレッドを根こそぎDLする行為をクロール行為と
 いいます。
 クローラーとはクロール行為をする人の事です。
・過剰リロードとは文字通り過剰にリロードをしてsubject.txt等を取得
 する行為です。

■どうして迷惑なの?
 クロール行為や過剰リロードは鯖に過剰な負担をかけるため、最悪、鯖落ち
 する危険があります。

■やったらどうなるの?
 発見されて悪質な場合は規制情報板に掲載の上、該当プロバイダに通報
 されます。
 もしも先方が対応しなかったり、再発するような場合は .htaccessで
 denyする場合もあります。

■.htaccessでdenyされるとどうなるの?
 .htaccessでdenyされると書き込みはおろか閲覧すら出来なくなります。
2005/04/16(土) 17:27:10ID:xQplBs7e0
もうFOXはスクリプト作るな

一生ROMってろ
2005/04/16(土) 17:27:13ID:KgCd+Km+0
>>830
VIPPER以外の2chネラーは全員嫌っていると思いますけど。。。
833動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 17:28:20ID:bRXuLc7V0
ID:KgCd+Km+0ってID:xgpNe0gA?
834動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 17:28:23ID:qQ0ApyNo0






                                ↓
                          →ID:KgCd+Km+0←
                                ↑
835動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 17:29:16ID:pIli2evi0
>>832
必死すぎるとこがステキ
836動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 17:29:48ID:l0nfzhSc0
>>833
っぽいw あっちからいなくなったと思ったらこっちで頑張ってたんだな
2005/04/16(土) 17:31:06ID:YvPSyYye0
FOXのせいか…
838帰ってきた100円札マン ◆100enpax7E
垢版 |
NGNG
どうしてみんなFOX★たんをいじめるの><
2005/04/16(土) 17:36:31ID:kh3vyGn20
責任の押し付けはぶっちゃけイラネ
2005/04/16(土) 17:37:19ID:yMmUlKHV0
      、-'''"´ ̄ ̄`"''''-、
     / / ;;;;;;;;;;;;;  \ \⌒⌒
    / ..::;;● ;;;;;;;;;;;;;, ●;;;;;;;;;::ヽ  ^^
    |. .::;;;;;;;;;;;(__人__);;;;;;;;;;;;;;;;::.|
 ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄
     :::::;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;::::
       :::::::;;;;;;;;;;;;;;;;;;;;;;;;;     
        ::::::::::::::::∧_∧   そうやってなんでも
        ::::::::: ( ::;;;;;;;;:)      VIPのせいにしてりゃいいさ…
          _..  /⌒:::;;;;;ヽ
-― ―'ー'-''―-''/ / ::;;;;;;;;:| |―'''ー'-''――'`'
 ,,  '''' .  ''''' と./ゝ_;_;_ノヽつ   、、, ''"        それがVIPクオリティ…
    ,,, ''  ,,,    ::;;;;;;;;;::: ,,  '''''  ,,,,        http://ex10.2ch.net/news4vip/
2005/04/16(土) 17:38:23ID:OaFklsy/0
どう考えてもFOXが悪いから
2005/04/16(土) 17:40:32ID:V05T2XY70
FO糞のウンコスクリプトが.htaccessを壊した

でFA?
843動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 17:41:10ID:VCoBfK1C0
>>root ★さん、ここ見てますか?
クラシックミラーとテスト1がバーボンハウスに入ってしまってます。
運用情報板すら見れない状態になってます。なんとかして〜。
2005/04/16(土) 17:43:33ID:bXkD8dEf0
>>843
お茶飲んでる
2005/04/16(土) 17:45:50ID:OiHyav7G0
この板ってri.piだっけ、あれまだ生きてるんじゃなかったかな・・・
ちょっと試してみよう
846843
垢版 |
2005/04/16(土) 17:46:21ID:VCoBfK1C0
あっと、>843のレス無し。
バーボンには入ってないや。
でも運用情報板が見れない。
なんでだろ〜?
847動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 17:48:51ID:REh6YWq30
      、-'''"´ ̄ ̄`"''''-、
     / / ;;;;;;;;;;;;;  \ \⌒⌒
    / ..::;;● ;;;;;;;;;;;;;, ●;;;;;;;;;::ヽ  ^^
    |. .::;;;;;;;;;;;(__人__);;;;;;;;;;;;;;;;::.|
 ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄
     :::::;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;::::
       :::::::;;;;;;;;;;;;;;;;;;;;;;;;;     
        ::::::::::::::::∧_∧   そうやってなんでも
        ::::::::: ( ::;;;;;;;;:)      俺のせいにしてりゃいいさ…
          _..  /⌒:::;;;;;ヽ
-― ―'ー'-''―-''/ / ::;;;;;;;;:| |―'''ー'-''――'`'
 ,,  '''' .  ''''' と./ゝ_;_;_ノヽつ   、、, ''"        それがFOXクオリティ…
    ,,, ''  ,,,    ::;;;;;;;;;::: ,,  '''''  ,,,,        http://qb5.2ch.net/operate/
2005/04/16(土) 17:50:50ID:kzgtHcNO0
ヤアユカイユカイ
2005/04/16(土) 17:52:09ID:f9IqlVqO0
いったん access_log に吐かれたものを読み込んで解析するより,
短時間に急激に多数アクセスしてくるのをリアルタイムで検出するには,

CustomLog |/path/to/watch combined

のように監視プログラムにパイプでログ情報を渡した方がいいのかな.
複数 CustomLog ディレクティブを指定すればそれぞれの指定ごとに
ログが吐かれるので,普通の access_log もそのまま出力できるし.
ログフォーマットはプログラムでパースしやすいように適宜変更する方がいいかも.
850FOX ★
垢版 |
2005/04/16(土) 17:52:35ID:???0
どうかな

改修してみた。

現在

指数
100 基準値
400 BBON 発動値 ← 現在
851動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 17:53:16ID:4OZc2Dp20
>>850
FOX★ 正座会場
http://qb5.2ch.net/test/read.cgi/operate/1113640137/
852動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 17:53:17ID:qQ0ApyNo0
>>850
よく分からんが乙
2005/04/16(土) 17:53:51ID:L2qSzv9R0
>>850
FOX★ 正座会場
http://qb5.2ch.net/test/read.cgi/operate/1113640137/
854動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 17:54:28ID:X8QRM2M70
>>850
FOX★ 正座会場
http://qb5.2ch.net/test/read.cgi/operate/1113640137/
2005/04/16(土) 17:54:44ID:0mDdMFq50
>>850
FOX★ 正座会場
http://qb5.2ch.net/test/read.cgi/operate/1113640137/
856動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 17:54:54ID:VpzqTNv20
>>850
FOX★ 正座会場
http://qb5.2ch.net/test/read.cgi/operate/1113640137/
2005/04/16(土) 17:55:20ID:hDTNjVtB0
>>850
FOX★ 正座会場
http://qb5.2ch.net/test/read.cgi/operate/1113640137/
858動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 17:55:58ID:zNk0eJDP0
忙しそうだから正座は許してやろうよ
2005/04/16(土) 17:56:06ID:OaFklsy/0
>>850
FOX★ 正座会場
http://qb5.2ch.net/test/read.cgi/operate/1113640137/
2005/04/16(土) 17:57:18ID:kzgtHcNO0
人気者だね、狐
2005/04/16(土) 17:57:30ID:TiGoszg/0
>>850
ん、よくわからんが漏れも。


FOX★ 正座会場
http://qb5.2ch.net/test/read.cgi/operate/1113640137/
2005/04/16(土) 17:57:51ID:AOsL2r5B0
おまえらwwww
863動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 17:57:59ID:bRXuLc7V0
じゃあ俺も
>>850
FOX★ 正座会場
http://qb5.2ch.net/test/read.cgi/operate/1113640137/
2005/04/16(土) 17:58:56ID:eQ3C0p2n0
>>850
FOX★ 正座会場
http://qb5.2ch.net/test/read.cgi/operate/1113640137/

僕も
2005/04/16(土) 17:59:20ID:pbsORkjS0
>>850
FOX★ 正座会場
http://qb5.2ch.net/test/read.cgi/operate/1113640137/

僕は、神山満月ちゃん
2005/04/16(土) 17:59:37ID:VXycVY7g0
お前らいい加減にしろよ。
対策スレの邪魔になる。
2005/04/16(土) 18:00:38ID:gH2RSk710

>>850
FOX★ 正座会場
http://qb5.2ch.net/test/read.cgi/operate/1113640137/
868動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:01:37ID:cs4cZdSD0
>>850
FOX★ 正座会場
http://qb5.2ch.net/test/read.cgi/operate/1113640137/
869動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:01:47ID:64cVYvHf0
>>866
せめて狐は謝れ。
2005/04/16(土) 18:01:50ID:uFG2Ak2d0
今回のトラブルで、VIPが収まり付かなくなってるけど、
FOXたん、そこのところどう思う?
2005/04/16(土) 18:03:43ID:L2qSzv9R0
>>850
FOX★ 正座会場
http://qb5.2ch.net/test/read.cgi/operate/1113640137/
872root▲ ★
垢版 |
NGNG
さて、ここでは作業すすめたいので、
正座会場への依頼は、ほどほどでおながいします。

向こうではそのうちおじさんが、何かパフォーマンスしてくれることでしょう。
私も、期待しています。
2005/04/16(土) 18:05:06ID:TiGoszg/0
頼みましたぞ。
874FOX ★
垢版 |
NGNG
>>872

pie.bbspink.com
idol.bbspink.com
sakura01.bbspink.com
sakura02.bbspink.com
sakura03.bbspink.com

を追加していただけるとありがたいです
875動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:07:54ID:edh7IWxiO
>>872
君の罪は重い
876動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:08:08ID:hsjoFfxZ0
>>874
1000回メモした
877FOX ★
垢版 |
NGNG
登録されているサーバは同時に動き始めるんですよね?
できれば >>874 はリストの最初のほうに入れてもらいたいです
878動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:09:48ID:hsjoFfxZ0
>>877
879動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:12:33ID:owQ+E2BZ0
286 :動け動けウゴウゴ2ちゃんねる :2005/04/16(土) 17:09:35
FOXが調子に乗りすぎ クローラー設定でイジってて違うとこイジっちゃった
セックルするつもりがアヌスにニュルンとか・・・そんな感じ
288 :root▲ ★ :2005/04/16(土) 17:09:30 ID:???0 ?##
なおってきたかな。
880root▲ ★
垢版 |
NGNG
>>874 >>877
了解。
いってきます。
881動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:15:28ID:RNpEpoI00
>>874
お願いです。死んでください。
882root▲ ★
垢版 |
NGNG
>>880 done.
最初の5つに入れました。
次回の実行から、動き始めます。
883動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:15:41ID:6qqUvKSR0
ヽ(・∀・)ノヽ(・∀・)ノ●ウンコー●ウンコー
2005/04/16(土) 18:18:06ID:VXycVY7g0
>>882
root ★さん、FOX ★さん乙
今のところ様子見でいいのかな?
885FOX ★
垢版 |
NGNG
行った措置

1) 【出口】.htaccess に変なのが混入しないように値のチェックの強化
2) 【入口】BBON 発動基準値をあげ(緩和して)発生量を少なくした
3) 【中間】.htaccess の更新頻度を下げた >>874 のリストが一巡したら一回(運次第かも)
4) 【夜食】牛丼をたべた
5) 【現在】充実感で満たされている。

あー 今日も沢山叩かれた!!
886動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:20:01ID:vW6tRv590
>>885
じゃこちらへドゾーw

FOX★ 正座会場
http://qb5.2ch.net/test/read.cgi/operate/1113640137/l50
887動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:20:03ID:REh6YWq30
>>885
自覚あるなら一言でいいから謝れ
2005/04/16(土) 18:21:27ID:VXycVY7g0
>>885
もつかれさまです。
叩かれるのは運命だからしゃーないっしょ
サンドバック用の★でも用意したらどうでっしゃろ。
889動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:22:26ID:z7nANT0Z0
>>885
890動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:23:10ID:hc6sK8yA0
>>885
いい加減スレ立てて原因を正式発表しろぼけ。
891root▲ ★
垢版 |
NGNG
>>888
サンドバック用の★ = FOX
2005/04/16(土) 18:23:58ID:rgIZCjzL0
>>885
おつかれ。実験に事故は付きものだから気を落とすな。
2005/04/16(土) 18:25:19ID:pMAFrqJB0
★ = FOX=root
894動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:26:05ID:vW6tRv590
>>891
トリケラワロスw
2005/04/16(土) 18:26:30ID:o5OargAY0
>>891
話がわかる人だな
896焼きうどん ★
垢版 |
2005/04/16(土) 18:27:34ID:???0
>>885
乙ですー
2005/04/16(土) 18:27:34ID:WCKbiEJ80
>>890
.htaccess に変なのが混入

じゃね?
898動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:27:50ID:vnTmcLYmO
>>885
で、原因は?
899動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:28:53ID:hc6sK8yA0
>>891
あんたの▲を狐んいあげるってのはどうだろう
2005/04/16(土) 18:29:25ID:EnjrmtGN0
原因マダー?(・∀・ )っ/凵 ⌒☆チンチン!
901動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:29:34ID:YvnyA9S70
>>FOX
  ∧_∧
 ( ´・A・) 正座まだ?
 ( ∪ ∪
 と__)__)
902動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:33:01ID:6qqUvKSR0
426 名前:FOX ★[] 投稿日:2005/04/16(土) 18:31:48 ID:???0 ?###






キタ━━━( ´∀`)・ω・) ゚Д゚)・∀・) ̄ー ̄)´_ゝ`)━━━!!!
2005/04/16(土) 18:33:25ID:LDBejyNY0
newsplus.jpがバーボン入りしているってことは、全取得と差分取得の区別していないってことでOK?
904FOX
垢版 |
NGNG
>>898

直接的な原因は.htaccess の破損
なぜ .htaccess が破損するかというと今までは stat.2ch からしか
更新の命令は来ないし、順番に呼び出しだったので錯綜しなかった
今回はいろいろなサーバから同時にリクエスト来るので壊れた
2005/04/16(土) 18:34:43ID:oIXt/cJW0
>>903
完全に区別してない
906動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:35:39ID:cnQnGR+o0
>>904
誰?
907動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:36:17ID:0wgJWu3q0
>>906
FOX
908root▲ ★
垢版 |
NGNG
>>903
してないですね。

というか上の方に「レンジ0-にすれば200も206にできる」って書かれちゃったような気がするから、
それがほんとだとすれば、206を軽くしにくくなりましたね。
909動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:36:49ID:yC0TsImI0
>>904
把握した
2005/04/16(土) 18:36:52ID:8NUx8L4i0
>>904
・・・
2005/04/16(土) 18:37:13ID:???0
何か、事故って祭りになってたようで(苦笑
そろそろ次スレのテンプレ作ってきます。
その前に状況把握から始めないとなぁ
912動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:37:50ID:YjCT4uH+O
>>904
名前が小さい件について………( ゚Д゚)ヽぺ
2005/04/16(土) 18:39:14ID:QQadyMdE0
>>904
またそうやって、みんなの注目を集めようとしていますね。
白文字
NGNG
クローラーがちょっと考えてくれればいいことなんだけどね。
>>904 見えないよ( ´∀`)
915898
垢版 |
2005/04/16(土) 18:40:04ID:vnTmcLYmO
>>904
ほほう…
916動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:40:44ID:nwKqUEzC0
>>904
つまり、ファイルシステムのせいなんだな?
第三者が故意に破損させたんじゃないんだな?
いろいろなサーバから同時にリクエストが来たのはなぜ?
変なスクリプトを書いたから?
2005/04/16(土) 18:43:10ID:WCKbiEJ80
>>916
スレタイ見ろ
2005/04/16(土) 18:45:26ID:oIXt/cJW0
>>908
本当だよ

iria等普通はやらんけど ReGetはやってた

サーバへリクエスト送信
GET /operate/dat/1113640137.dat HTTP/1.1
Host: qb5.2ch.net
Range: bytes=0-

サーバからのレスポンス
HTTP/1.1 206 Partial Content
Last-Modified: Sat, 16 Apr 2005 09:42:46 GMT
Content-Length: 142791
Content-Range: bytes 0-142790/142791
Connection: close
Content-Type: text/plain
2005/04/16(土) 18:45:42ID:bB9tMWRh0
オレが予想するバーボン規制のパラメータ。適当だけど。

一時間に一回:いくらなんでも大丈夫だろう。
10分に一回:まだまだ大丈夫。
60秒に一回:たぶん大丈夫?
30秒に一回:まだ大丈夫かな…?
10秒に一回:そろそろイエローカード?
5秒に一回 :自動巡回ですか?
3秒に一回 :( ̄ー ̄)ニヤリ
1秒に一回 :アクセスしすぎ。レッドカード。
それ以下  :ISPへ通報。
2005/04/16(土) 18:49:44ID:n/a12lGw0
ドラゴンボールにバーボンってキャラいなかったっけ。
2005/04/16(土) 18:50:52ID:FOKtDBku0
>>920
ハンター×ハンターじゃね?
922動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:51:07ID:AgEXq3kQ0
>>920
バーボンさん、ドドリアさん。

AFOか。
2005/04/16(土) 18:51:15ID:8NUx8L4i0
ザーボンなら知ってる
2005/04/16(土) 18:52:39ID:oi6rTTdx0
やっておしまい、バーボンさん
2005/04/16(土) 18:53:16ID:rfVSCxyo0
       / ̄ ̄ ̄ ヾ=ー、_
      / // /  ト    ヽ
     / //   / ///V/|   |
   // /  // //"""""|   |
  /   /  // //,,,___,,,,,,|| | |
  |    // //__ `o´ __.|| | |   
  |ヾー  //=二(:ヾ  'l:ノ=|| | |  
  ミ三三彡//      l   /ヾl ll   
 (、ヾミ/`iノ    、_ゝ /彡/  <ザーボン?
―"―-ノ|o' ヽ`-、   /o'l---――‐
 i  i |  |     \_7´/ | | |  i  
 |  | ゝ_ `ー――――' ノ  |  |
2005/04/16(土) 18:57:00ID:o5OargAY0
炭素?
2005/04/16(土) 18:58:08ID:/bLbsPez0
それはカーボン
928動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:58:27ID:YjCT4uH+O
>>926
カーボン
929動け動けウゴウゴ2ちゃんねる
垢版 |
2005/04/16(土) 18:59:09ID:G1STFtOn0
そりゃカーボンw
930讃岐 ◆IamaVIPdCI
垢版 |
NGNG
>>926-929
うはwww
レス数が900を超えています。1000を超えると表示できなくなるよ。
5ちゃんねるの広告が気に入らない場合は、こちらをクリックしてください。

ニューススポーツなんでも実況