【.htaccess】読みこみできない【規制作戦】

**動け動けウゴウゴ２ちゃんねる** · 04/04/26 17:35

http://qb3.2ch.net/test/read.cgi/operate/1082125059/864-865n
864 ：動け動けウゴウゴ２ちゃんねる：04/04/26 16:31 ID:XBHI6262
全datさらうのを勧めるのもどうかと
　
865 ：留守番 ★ ：04/04/26 16:42 ID:???
>>864
最近増えてきているんですよねぇ
.htaccess で deny の規制が復活の予感。
　
http://qb3.2ch.net/test/read.cgi/operate/1082125059/867-868n
867 ：root ★ ：04/04/26 16:47 ID:???
datかっさらいもさることながら、read.cgi経由も目につくような気が。
　
868 ：留守番 ★ ：04/04/26 16:49 ID:???
>>867
ですねぇ
　
思い立ったが吉日ってことで
スレ立ててやりましょ

**FOX ★** · 04/04/26 17:42

さてさて、

**動け動けウゴウゴ２ちゃんねる** · 04/04/26 17:43

3get!!

04/04/26 17:53

どうせなら.htaccessでリダイレクト先を広告でいっぱい埋め尽くせば良いのに（素

**動け動けウゴウゴ２ちゃんねる** · 04/04/26 17:57

これで、みみずんﾀﾝやにくちゃんねるさんが規制されることはないんですよね？

**動け動けウゴウゴ２ちゃんねる** · 04/04/26 18:06

過去スレね。

【読めない】.htaccess規制情報【書けない】 Part2
http://qb3.2ch.net/test/read.cgi/operate/1057570387/

**rafale ★** · 04/04/26 20:23

懐かしいスレが復活しましたねぇ。
出張先から記念パピコ。

**油すまし** ◆NEXTdtOv.. · 04/04/26 20:46

一定時間毎にsubback.htmlを読んで、新スレのみをいただくというのも
所謂「かっさらい」に該当するのでしょうか…？

ようは、こういうことなのですが。
http://www.dqnplus.net/

04/04/26 20:50

>>8
subback.htmlよりsubject.txt取得の方が効率良いですし、おすすめです。
datかっさらいは・・・どうなんでしょう

**rafale ★** · 04/04/26 20:59

以前newsplus.jpはそれで規制くらいましたね。
程度問題だとは思いますけど。

**油すまし** ◆NEXTdtOv.. · 04/04/26 21:05

ありがとうございます。
たしかにsubback.txtを読んだ方が軽いですね。
変更することにします。

当面はこのスレの流れを読みつつ対応していきます。

**動け動けウゴウゴ２ちゃんねる** · 04/04/26 21:05

鯖に負担をかけない程度にやさしくやる分にはいいんじゃないかなぁ。

**root ★** · 04/04/26 21:10

コストの面からいうと、

・>>1を取るためだけの目的でread.cgiを呼ぶのはコストが高いので、避けてほしい
・datをとる場合、できるだけ前に取ったものの増分で入手してほしい

といったところかなと。

あとは、read.cgi経由で統計情報のグラフに影響が出るぐらい、
がばちょと読んでいる方がたまにいるみたいということかなと。

なお、みみずんさんとかは、負荷のかからない時刻にやさしくスキャンいただいている模様であると、
その筋の方からうかがっておりますです。

**root ★** · 04/04/26 21:13

「read.cgiでがばちょ」の対象になっていそうなのは、見ている範囲だと、

・memories(の各バーチャルホスト)
・news5
・news6
・pc5
・science2

あたりか。

あとは私が統計情報見ていないところでも、別途あるかも。

**油すまし** ◆NEXTdtOv.. · 04/04/26 21:16

私のサイトでは、datから必要な情報は、
・スレ立て人
・>>1
なので、一度datをいただいてDBに入れたスレには二度とアクセスしていません。
もちろん、read.cgiは通していません。

ただ、subback.htmlを5分毎に読んでいるのですが、いかがなものでしょうか？

**FOX ★** · 04/04/26 21:31

bby の方から取ってね

04/04/26 21:34

こんな感じにした方が言いかと。

dat取得は1個ごとに10secのwaitをいれる

newsplus.jpから入手した情報ですけどｗ

04/04/26 21:35

そいやあbbyを作ったヘッドラインがあったｗｗｗ
すっかり忘れてた

http://webtool.2ch-tool.net/bby2.php

04/04/26 21:37

×　作った
○　使った

頭がつかれてるっぽい。。。

**リスナァ** ◆RadioPwTXg · 04/04/26 21:40

>>16
BBYのdatはどれ位の間保持されてますか？

**油すまし** ◆NEXTdtOv.. · 04/04/26 21:40

わかりました。
改良していきます。

ありがとうございました。

04/04/26 21:50

>>20
1時間ごとにclearだったかな？。一応100個までらしいです。

**リスナァ** ◆RadioPwTXg · 04/04/26 22:04

>>22
TNX

**root ★** · 04/04/26 22:08

>>20 >>22
subject.txtから消えるだけで、bbynews/bbyliveのdatそのものは3日前のものまで残っています。
ただし元記事がスレッド削除された場合、最大30分の遅延でこちらのdatも消えます。

**リスナァ** ◆RadioPwTXg · 04/04/26 22:15

>>24
なるほど…
どうもありがとうございます。

◆cZfSunOs.U · 04/04/27 00:04

.htaccess で弾くとすると...... deny リストの数が多くなってきたら，
前作った mod_authz_iplist が効果的かも．

YahooBB218126164168.bbtec.net · 04/04/28 18:07

**動け動けウゴウゴ２ちゃんねる** · 04/04/28 19:21

ここはどうなんでしょうか。
http://news.2ch2.net/

**動け動けウゴウゴ２ちゃんねる** · 04/04/28 19:34

>>28
そこは2chではないので2ch2.netの方に言ってくださいな

**動け動けウゴウゴ２ちゃんねる** · 04/04/28 19:40

>>29
そこも、newsplusやbizplus、dqnplusの
subject.txtなんかを総ざらいしているはずですが。

**動け動けウゴウゴ２ちゃんねる** · 04/04/29 10:51

鯖とか回線に余裕がある時間帯にGETすればいいですか？
何曜の何時ころ余裕あります？

**動け動けウゴウゴ２ちゃんねる** · 04/04/29 11:45

>>31
http://mumumu.mu/mrtg/mrtg-rrd.cgi/traffic/
を参考にしてみれば？

**動け動けウゴウゴ２ちゃんねる** · 04/04/29 12:02

>>32
ども。
4時～6時くらいが底みたいすね。

**名無しの慟哭** · 04/04/29 14:21

懐かしいスレタイゆえ、記念カキコ

◆g4HrV7ViKA · 04/04/29 14:59

嗚呼、思い出すは去年の夏、、、
そしてマーリンルージュ、、、

記念ぱぴこ

**ｒｅｆｆｉ@報告人 ★** · 04/04/29 19:05

別スレでレスした際にむむむさんのページ見てた際に気がついたんですけど
たんですけどmemoriesで今日の４～５時までの間にread.cgiブン回してぶっこ
抜きやってた痕跡がありますね。。

read.cgiのアクセス記録で見ればわかりますけど明らかに怪しい動きしています。

ttp://mumumu.mu/mrtg/mrtg-rrd.cgi/read/memoriesread.html

◆F6an1MWJ7o · 04/04/29 21:23

>>36
その時間帯なら他にもある様子

**FOX ★** · 04/05/13 05:36

う～ん
まじで何とかしなきぉだぞー

簡単にどのIPががんがん持っていっているかをアパッチのろぐから
一発で表示してくれる cgi きぼー

1) ログは巨大である(停止しているサーバでも 100M/day)
2) read.cgi だけ抽出して呼び元の多い順に表示

出力例)
read.cgi　(←　ここは .dat とか、bbs.cgi とか .html .txt に変わる)
1. 111.112.113.114 8,360 回
2. 222.112.113.114 4,230 回
3. 333.112.113.114 2,560 回

だれか作ってくれー

**動け動けウゴウゴ２ちゃんねる** · 04/05/13 05:38

よし、がんばれ。

**FOX ★** · 04/05/13 06:42

pc4.2ch.net サーバ
371318
read.cgi 呼び出し回数 = 159230
64.68.92.14(6804)
64.68.92.9(6780)
64.68.92.18(6568)
64.68.92.11(6519)
64.68.92.10(6311)
64.68.92.17(6158)
64.68.92.19(6132)
64.68.92.4(6039)
64.68.92.5(5883)
64.68.92.6(5863)

**FOX ★** · 04/05/13 06:47

bubble.2ch.net サーバ
read.cgi 呼び出し回数 =
64.68.92.14(4882)
64.68.92.9(4545)
64.68.92.18(4449)
64.68.92.10(4434)
64.68.92.11(4314)
64.68.92.17(4306)
64.68.92.19(4236)
64.68.92.6(4140)
64.68.92.5(4101)
64.68.92.4(4040)
64.68.92.16(2665)

**動け動けウゴウゴ２ちゃんねる** · 04/05/13 06:54

>40
それだけ見る限りでは、64.68.92.0/24(*****回)みたいな感じで纏めたほうが便利かも。

**FOX ★** · 04/05/13 06:54

order allow,deny
allow from all
deny from 64.68.92.

を入れてみる

**動け動けウゴウゴ２ちゃんねる** · 04/05/13 06:57

64.68.92.* googlebot.com……グーグルか！　なるほど（ｗ

**FOX ★** · 04/05/13 06:59

>>42
わちしの　perl じゃ無理っぽい

**FOX ★** · 04/05/13 07:03

pc4.2ch.net サーバ
.dat 呼び出し回数 = 139021
219.106.23.235(11074)
219.167.59.210(4425)
218.228.216.29(2456)
220.210.180.206(1793)
218.228.216.14(1407)
218.228.185.40(1306)
202.225.240.125(1261)
61.201.230.16(1086)
218.228.216.129(980)
221.184.158.51(821)
143.90.87.123(615)

**動け動けウゴウゴ２ちゃんねる** · 04/05/13 07:03

googleが相手ならrobots.txtを置いておくというのでは駄目なのでしょうか？

**FOX ★** · 04/05/13 07:06

bubble.2ch.net サーバ
.dat 呼び出し回数 = 30589
218.228.216.29(1967)
218.228.216.14(1137)

**FOX ★** · 04/05/13 07:07

bubble.2ch.net サーバ
.txt 呼び出し回数 = 7075
210.138.60.135(1981)

**FOX ★** · 04/05/13 07:08

pc4.2ch.net サーバ
.txt 呼び出し回数 = 46430
210.138.60.135(1991)
218.223.194.216(1092)
219.106.243.202(872)
210.147.179.31(834)
61.121.247.58(653)
210.170.129.199(540)
219.111.57.38(504)
210.173.38.6(451)
219.126.175.153(397)
202.213.149.85(392)
129.250.170.69(384)

**FOX ★** · 04/05/13 07:13

pc4 bubble に入れた

order allow,deny
allow from all
deny from 64.68.92.
deny from 219.106.23.235
deny from 219.167.59.210
deny from 210.138.60.135
deny from 218.223.194.216

**FOX ★** · 04/05/13 07:15

どうしますかねぇ

google とかのはいつでも止められるということで良いんですが、
固定IPのところもはじけばいいんですが、

その他のねぇ、、、
規制情報板経由ですかねぇ。

**動け動けウゴウゴ２ちゃんねる** · 04/05/13 07:19

219.106.23.235 ntt1-ppp489.utunomiya.sannet.ne.jp
219.167.59.210 o059210.ap.plala.or.jp
210.138.60.135 135.60.138.210.bn.2iij.net
218.223.194.216 goa.self-core.org

self-core.orgってなに？

**動け動けウゴウゴ２ちゃんねる** · 04/05/13 07:30

>53
whoisによると、ケーブルテレビで固定ＩＰの個人ユーザーっぽい。

**ｒｅｆｆｉ@報告人 ★** · 04/05/13 12:02

>52
個人でのぶっこ抜き行為ですけど明らかに２ちゃんの鯖に過剰に負担をかける
行為ですので通報は可能だと思います。
規制情報板へログを添付して掲載して頂ければ該当プロパへ通報します。

**動け動けウゴウゴ２ちゃんねる** · 04/05/13 12:13

User-agent: *
Disallow: /test
で行儀のいいロボットにはお帰りいただけます。
もちろんGoogleも。

**動け動けウゴウゴ２ちゃんねる** · 04/05/13 13:12

Google ハジかれるとちょっとやだなぁ

**動け動けウゴウゴ２ちゃんねる** · 04/05/13 14:34

902に関して言えば、ログ移動後しばらく（どのくらいがしばらくかは不明）
ロボちゃんに舐めてもらって、あとはお引取りいただくとか。

名前で調べてきてればそれも必要ないかな？

◆F6an1MWJ7o · 04/05/13 14:39

>>38
>簡単にどのIPががんがん持っていっているかをアパッチのろぐから
>一発で表示してくれる cgi きぼー
ログ出力をカスタマイズしてると・・・

>46は差分取得してない所？

◆Reffi/bQ.c · 04/05/13 14:46

その辺の話はここへ依頼した方がいい物が来そうな悪寒がします。

Apache関連 Part5
http://pc5.2ch.net/test/read.cgi/unix/1058797852/

**FOX ★** · 04/05/13 19:05

pc4 にこれ入れたんだけど
定期的に相変わらずの転送量だなぁ

書き方がまちがっているのか ?

order allow,deny
allow from all
deny from 64.68.92.
deny from 219.106.23.235
deny from 219.167.59.210
deny from 210.138.60.135
deny from 218.223.194.216

◆Reffi/bQ.c · 04/05/13 19:16

>61
web制作板にあったので見てみましたけど合ってますね。

.htaccess質問コーナー
http://pc5.2ch.net/test/read.cgi/hp/1065608009/

お行儀のいいrobotは>56でお帰り頂くとしても個人でやってるのは繋ぎ替えで
やってきたらどうしようもないと思われ

※参照ＵＲＬ漁ってたら恐ろしい物が
　間違っても絶対に実行しないでねｗ
　やったら全てのアクセスが拒否されます。

>deny from all

**FOX ★** · 04/05/13 19:20

test/.htaccess との兼ね合いだったようです。
只今　pc4 bubble で実験中。。。

**マァヴ** ◆jxAYUMI09s **＠マァヴ ★** · 04/05/13 19:36

あ、みみずんとかにくちゃんねるさんところのIPを弾かないようにしとかないとね(^_^;)
IPアドレス聞いておこう・・・・

**FOX ★** · 04/05/13 19:49

sports4.2ch.net サーバ
read.cgi 呼び出し回数 = 68373
211.4.214.174(2819)
64.68.92.9(1769)
64.68.92.14(1737)
64.68.92.18(1578)
64.68.92.10(1575)
64.68.92.5(1564)
64.68.92.19(1544)
64.68.92.11(1530)
64.68.92.4(1513)
64.68.92.17(1497)
64.68.92.6(1409)
222.3.210.177(1156)
210.227.247.74(1052)

**FOX ★** · 04/05/13 19:49

誰じゃい
ぶん回しているのは、

**FOX ★** · 04/05/13 19:54

life4.2ch.net サーバ
read.cgi 呼び出し回数 = 88126
211.4.214.174(10998)
211.4.214.173(5376)
64.68.92.14(3312)
64.68.92.9(3236)
64.68.92.18(3033)
64.68.92.11(3018)
64.68.92.17(3010)
64.68.92.10(3000)
64.68.92.4(2907)
64.68.92.19(2857)
64.68.92.6(2845)
64.68.92.5(2799)
64.68.92.16(1764)
64.68.92.15(1662)
64.68.92.12(1630)
64.68.92.13(1489)