クローラー＆過剰リロード対策スレ

**ｒｅｆｆｉ@報告人 ★** · 2005/04/15(金) 04:49:50

最近、頻発しているクローラーや過剰リロード対策スレッドです。

★FAQ

■クローラーや過剰リロードとは？
・ツール等を使って板のスレッドを根こそぎＤＬする行為をクロール行為と
　いいます。
　クローラーとはクロール行為をする人の事です。
・過剰リロードとは文字通り過剰にリロードをしてsubject.txt等を取得
　する行為です。

■どうして迷惑なの？
　クロール行為や過剰リロードは鯖に過剰な負担をかけるため、最悪、鯖落ち
　する危険があります。

■やったらどうなるの？
　発見されて悪質な場合は規制情報板に掲載の上、該当プロバイダに通報
　されます。
　もしも先方が対応しなかったり、再発するような場合は .htaccessで
　denyする場合もあります。

■.htaccessでdenyされるとどうなるの？
　.htaccessでdenyされると書き込みはおろか閲覧すら出来なくなります。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 02:26:20

何がどうなったのかわからないので
運営板を初めて見ました
携帯から記念カキコ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 02:26:52

●持ちなのに関係ないのか…

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 02:27:33

>>303
こちらに載ってます
http://qb5.2ch.net/test/read.cgi/operate/1113508190/

**讃岐＠焼きうどん ★** · NG

一応、中間鯖(ｱｲﾓﾅ鯖)の管理人の人達にメールしておきました

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 02:28:15

>>305
>>167

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 02:28:26

細かい設定は秘密で良いけどカウントされる条件を教えてくれよ。
鯖単位で適応されるのか。書き込みも含まれるのかとか。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 02:30:07

クローラーには苦労するのらー

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 02:30:52

>>309
鯖単位、引っ掛かれば2時間読み書き不可。

つーか書き込みには既に同様の規制が引かれてる

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 02:32:34

負荷対策なんだから鯖単位に決まってるだろう

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 02:33:05

他板から来たんだが、焼って印は
アク禁食らうとかそういう意味でいいのかな？

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 02:35:52

>>313
焼→boo81で焼かれたのでバーボン解除後も引き続きBBQによって規制、
でいいのかな？

**軍艦焼 ★** · 2005/04/16(土) 02:38:01

>>314 そ。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 02:41:36

壷からきたよ。
リロードってやっぱしちゃうもんね。
まあこれからはしないように気をつけますよ。
クローラーだけがわかりにくい。
誰か教えてください。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 02:42:32

>314-315
わかりました、レス有難うございます(ﾟДﾟ）ﾉ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 02:46:15

>>316
水泳選手

じゃなく、巡回してデータぶっこ抜く人（プログラム）のこと

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 02:48:11

何時に復旧する？

**動け動けウゴウゴ２ちゃんねる** · NG

>>316
えっとお約束の
>>1読めって事です。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 02:49:21

まあ>>1読んだりぐぐったりしようよ、と

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 02:49:33

>>319
調整し終わるまで。何時とは明確に答えられないと思われ。

まぁ素直に寝ておいた方がいいよ。

**FOX ★** · NG

んじゃ 2倍緩和して動かしてみます

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 02:51:37

>>323
少しは休めましたか・・・？

早いですねぇ・・・対応が・・・

◆yadoQ//n/E · 2005/04/16(土) 02:52:42

おかえりなさいまし。お疲れさまですおにいさま。

**真・変態(´ﾟω。`)** ◆iGHtueIUIU · 2005/04/16(土) 02:53:05

>>323
おまんこうｐ

white1.scn-net.ne.jp · 2005/04/16(土) 02:53:55

CATVの俺にはウルトラバットニュースなわけだが

**中継局長男** ◆HAMPAMXzMs · NG

>>323
乙ですよー
今のところは実況に支障は無い感じかなぁ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 02:57:11

>>323
206.223.147.35 (banana238.maido3.com)
が引っかかっているよ～～～

headline、statsかな・・・

**焼きうどん ★** · NG

>>323
一応、中間鯖の管理人にメールしておきました

あと、中間鯖の例外回避はどうなるのでしょうか？

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 02:58:28

Y!BBのユーザーはたまんないね

**FOX ★** · NG

手動で　以前の BBON は削除した

**真・変態(´ﾟω。`)** ◆iGHtueIUIU · 2005/04/16(土) 03:03:49

>>332
お疲れ。
おまんこうｐ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:04:11

>>332
お疲れさまです・・・

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:21:59

それはいい事だな　

　　　　　　　　　　　　　壷より愛を込めて

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:23:52

もうテンコ盛りですねｗ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:29:55

こうなるのか。

http://news18.2ch.net/test/read.cgi/news4plus/1113587883/15-19
15 ：<丶｀∀´>（´・ω・｀）（｀ハ´　）さん：2005/04/16(土) 03:08:23 ID://15c6Wf
[ア＋]データ取得できませんでした
http://headline.2ch.net/test/read.cgi/bbynews/1113587883/

なんすか、これ？
19 ：<丶｀∀´>（´・ω・｀）（｀ハ´　）さん：2005/04/16(土) 03:13:46 ID:Kes1BI2N
>>15
これ関連かなぁ
クローラー＆過剰リロード対策スレ
http://qb5.2ch.net/test/read.cgi/operate/1113508190/

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:32:43

hobby5にも入りましたねぇ・・・

全鯖に、導入されたのかなぁ・・・！？

**FOX ★** · NG

全サーバに入れてみた
いまのところ手動でなきゃ動かない

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:35:18

湯上がりrootくん待ちか

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:36:11

ちゃれんじゃー

**真・変態(´ﾟω。`)** ◆iGHtueIUIU · 2005/04/16(土) 03:36:11

>>339
お疲れ。
おっぱいうｐ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:37:04

糞スタッフ死ね

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:37:33

>>339
あっ、どうもです・・・

自動化されるもの時間の問題かな・・・

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:38:22

で、何回/secなんよ。

3回/secとかだと泣ける。

**FOX ★** · NG

bbspink でのテストも完

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:42:44

pinkはクローラーが多そうだな
じわりじわりと効果を発揮しそう

**マァヴ** ◆jxAYUMI09s · NG

>345
0.33秒に１回のアクセスって(^_^;)一時間に1万回以上になるんだけど・・・・

**ゆえぽ** ◆YUEyuecucU · 2005/04/16(土) 03:43:37

お疲れさまです

巡回の時引っかかりそうですね・・・　川；´д｀)ｷｦﾂｹﾅｲﾄ

**動け動けウゴウゴ２ちゃんねる** · NG

女神スレ→降臨→いいところでバーボン
うはｗｗｗｗ

**真・変態(´ﾟω。`)** ◆iGHtueIUIU · 2005/04/16(土) 03:44:00

>>346
お疲れ
センズリうｐ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:44:02

なんか管理してる人って２ちゃんねるをなるべく使わないでもらいたいだけのように思えて失笑

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:44:44

>>346
bbspink系も上がってきてますねぇ・・・

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:46:19

>>348
いや、1時間も続けるかよｗ

じゃ、質問を少し変えて･･･
3回/secを10秒続けたらバーボン逝きかかる？

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:47:17

みなさん乙です｡
クロールとか暇な時無意識にしちゃってる悪寒…
鯖の負担とかあまり考えた事ありませんでした｡
ごめんなさい(´･ω･｀)アイモナから反省パピコ

**マァヴ** ◆jxAYUMI09s · NG

>354
かかっても不思議はないと思われ(^_^;)常識的に考えて無茶なアクセスでしょ？
実際かかるかどうかはわからんけど・・・・

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:49:32

49 BBON.etc3 　 61.124.229.141 (actkyo002141.adsl.ppp.infoweb.ne.jp) 0
これはもしかしてvoteかなｗ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:49:54

わかんねぇのかよ！

**のいぽー（本物）** ◆News/n6/H2 · 2005/04/16(土) 03:50:16

ニュース速報プラス板で引っかかった。
かちゅ～しゃで巡回を一度しただけなのに。どういう基準なのかすら。。。

**動け動けウゴウゴ２ちゃんねる** · NG

しばらく様子見ていい具合にチューニングしてくれよ
いい迷惑だから

**マァヴ** ◆jxAYUMI09s · NG

>358
わかるのかよ！(^_^;)

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:51:01

巡回とかするやつはバーボン呑みまくれ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:51:51

以前に携帯からのアクセス(私家版含む)を全て黒山羊BlackGoat経由にするって話が出たとき、
黒山羊が落ちたら携帯からのアクセスが全滅してなにも出来なくなってまずいってことで、
各私家版メニューの中間鯖でwait入れてもらって様子見ることに落ち着いたんじゃなかったっけ？
つか黒山羊BlackGoatさんは全部の私家版メニューからのアクセスに耐えられないんじゃないの？

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:51:55

>>360
http://qb5.2ch.net/test/read.cgi/operate/1113435319/883

**（・３・）ぼるじょあ** ◆yBEncckFOU · 2005/04/16(土) 03:52:29

>>354
ちょ、ちょっと待って・・・２ちゃんで3回/secをする必要性が見つからないんだＧＡ・・・

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:53:19

>>365
例　え　だ　っ　つ　っ　て　ん　の

**マァヴ** ◆jxAYUMI09s · NG

>363
当初から黒ヤギさんのチューニングも進んでるし、台数も２台になってるからね(^_^;)
実際どの程度こなせるかはroot ★さんがよくわかってるとは思うけど・・・・
黒ヤギさん通すことで２ｃｈの負荷が軽減されることは確実(^_^;)うまくいくといいねー

**のいぽー（本物）** ◆News/n6/H2 · 2005/04/16(土) 03:54:12

http://qb6.2ch.net/_403/c403.cgi
58 BBON.news19 　 218.218.14.139 (EATcf-320p139.ppp15.odn.ne.jp) 1

うひょ。やっぱり引っかかってたよママン。
しゃばな！　うっ　かもん　ぎでった　はぅ　
げっと　おん　ざ　ぐっと　ふっと
ゲドン　グッフッ

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:57:17

もう２ちゃんねるも終わりだな
バカスタッフ共そんな事もわからないの？

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 03:58:21

単なる名無しですがわかりません。

**マァヴ** ◆jxAYUMI09s · NG

>369
終わるとなんかまずいのかな？(^_^;)

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 04:00:21

売られたけんかは残さず買う

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 04:00:22

終わっていいとも

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 04:01:08

スタッフって誰？

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 04:01:27

subject.txtも対象に入ってるんすか～？

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 04:02:06

お給料貰ってる人なんていないような

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 04:02:20

>>367
この前ｃだけのアクセスで転送量頭打ちになってたようだが、
ホントに大丈夫かねえ(;´-`)

**ｒｅｆｆｉ@報告人 ★** · 2005/04/16(土) 04:03:15

閾値を２倍に設定してもまだ引っかかる人は板巡回の方法を変えた方がいいですね。
漏れはJaneDoeViewだけど未読スレはスレを開かないと取得しない設定でやっていて
まだ引っかかってないです。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 04:04:55

黒山羊さんをあと２台くらい追加するとか

**真・変態(´ﾟω。`)** ◆iGHtueIUIU · 2005/04/16(土) 04:05:10

>>371
ぜんぜん問題ないです(^_^;)

**FOX ★** · NG

>>377
それは　ローカルなスイッチじゃないの?
よく仕組みはわからないけど、

もしくは二台くらい専用の BlackGoat をいれればいいような

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 04:05:31

>>378
専ブラの問題もあるけど、あと取得するスレの量によっても、
BBON行きになりそう・・・

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 04:06:09

>>375 そうだ！俺もそれが知りたい(ﾟДﾟ)

**マァヴ** ◆jxAYUMI09s · NG

>377
帯域が詰まるのは黒ヤギさん側でしょ？(^_^;)
ってことは黒ヤギさんの帯域を広げればいいわけで・・・・
プライベートネットワークなんで1Gbpsとかにすればいいんでないかと。

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 04:06:37

>>375
俺も聞いておきたい
クローラー作ろうかと思ってるから
まあ10分に1回程度だけど

**マァヴ** ◆jxAYUMI09s · NG

あ、プライベートじゃないのか？(^_^;)まずいのかも・・・・

[―{}@{}@{}-] **通りすがり** · 2005/04/16(土) 04:10:30

●持っててもだめなの？

**マァヴ** ◆jxAYUMI09s · NG

>387
だめだと思われ(^_^;)判別方法ないし

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 04:12:24

携帯アクセスを全て黒山羊さんからするなら、
現在のdelay120秒ってのは止めて欲しいわ～

**真・変態(´ﾟω。`)** ◆iGHtueIUIU · 2005/04/16(土) 04:12:31

>>388
それは困りましたね(^_^;)

**マァヴ** ◆jxAYUMI09s · NG

>389
黒ヤギさんの目的が優先かと(^_^;)
逆に言えば、黒ヤギさんの目的が阻害されてるような運用があるなら
外部携帯サーバは排除されてもしょうがない気がする

**マァヴ** ◆jxAYUMI09s · NG

>390
ま、無茶な使い方しなきゃいいだけで(^_^;)

**ｒｅｆｆｉ@報告人 ★** · 2005/04/16(土) 04:14:00

なんかdy.bbexcite.jpで必死に繋ぎ変えてはバーボン送りにされてるのが居ますねぇ（苦笑
おととい警告出した香具師と同じかな？

**真・変態(´ﾟω。`)** ◆iGHtueIUIU · 2005/04/16(土) 04:14:35

ものは言いようですしね(^_^;)

**FOX ★** · NG

>>389
60secじゃないの?

2005/04/16(土) 04:15:33

>>388
そんな、、、
これからたくさん過去ログ集めようと思っていたのに

**マァヴ** ◆jxAYUMI09s · NG

>396
のんびり集めるってことで(^_^;)これ重要

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 04:17:10

>>396
delayを10sec位にしてのんびり集めるのはどうよ？

**動け動けウゴウゴ２ちゃんねる** · NG

offlaw.cgiへのアクセスは容認すればいいのかな？＜●のサービス保証

2005/04/16(土) 04:18:21

ま、いっか

**動け動けウゴウゴ２ちゃんねる** · 2005/04/16(土) 04:18:36

>>391
いや、転送量頭打ちの前は60秒だったのよ。
それが今は倍の120秒更新になっててさ～。
ちょっと反応鈍すぎってカンジなのよね。

**マァヴ** ◆jxAYUMI09s · NG

>399
無茶なアクセスを保障する必要はないと思われ(^_^;)
それでもめるのも一興かもしれんけどね

**真・変態(´ﾟω。`)** ◆iGHtueIUIU · 2005/04/16(土) 04:21:05

２ちゃんねる１日閉鎖も面白そうですね(^_^;)