2ch特化型サーバ・ロケーション構築作戦 Part23

◆KONAN/fu2I · NG

2ch特化型サーバ・ロケーション構築作戦のスレッドです。

・２ちゃんねるのサーバロケーション、PIEに関する関連作業・調整事項
・DNS登録・変更関連の各種作業や調整事項
・２ちゃんねるのサーバで採用しているOS、FreeBSDに関する情報・調整事項
・各種作戦・プロジェクトとの連携、プロジェクト間の連携

等を取り扱います。

現在、複数サーバによる連携により、
サーバ能力のさらなるスケールアップをめざすための「雪だるま作戦」が進行中です。
しかし、問題はあらゆる意味で山積の状態です。

特に、成熟度を高めたリリースであるはずの FreeBSD 6.1R において、
amd64 アーキテクチャでの突然のハングアップの不具合が、深刻な問題となっています。

前ｽﾚ
http://qb5.2ch.net/test/read.cgi/operate/1150052911/

**ひろゆき＠どうやら管理人 ★** · 2006/07/28(金) 16:26:46

>>52
やったでーす。

**root▲ ★** · 2006/07/28(金) 16:27:49

>>111
作業はいります。

そのまま転送する形で。

**root▲ ★** · 2006/07/28(金) 16:28:56

ただ、1つ問題があって、
read.cgi では「dat がない」というエラーになるです。

壺を含む専用ブラウザでは、うまく動くはず(それも含めて検証してみます)。

**たにし ★** · 2006/07/28(金) 16:35:42

なるほどー
そうなのかー

分科会作ってわいわいしなきゃですなぁ
どの方法をとっても簡単にはいかなそう
かなりインテリジェントなことをするしか・・・

**ひろゆき＠どうやら管理人 ★** · 2006/07/28(金) 16:37:42

＞かなりインテリジェント
いやぁ、それほどでも。

◆FUGOUFZVvA · NG

了解しました。

**root▲ ★** · 2006/07/28(金) 16:38:55

news20 フロント設定完了。
news20b offlaw.cgi 有効にしました。

JaneView + ●で、以下のログが見られるのを確認しました。

米ＡＭＤ、ＡＴＩを近く買収。Intelにダメージ？
http://news20.2ch.net/test/read.cgi/news/1153640038/115

問題なさそうなら、17:00 ぐらいをめどに
live22x / live23 系も作業します。

**たにし ★** · 2006/07/28(金) 16:39:19

ぐはっ

**root▲ ★** · 2006/07/28(金) 16:48:00

>>115
> どの方法をとっても簡単にはいかなそう

というのには、やや同意ですね。
複数の事項をほぐして、単純化する必要があるのかなと。

**root▲ ★** · 2006/07/28(金) 16:48:56

で、分科会ですか、、、。

例によって、ここに新スレッドですかね。

**たにし ★** · 2006/07/28(金) 16:50:22

まずは、過去ログを見えるようにした。 ←　いまここ
次に過去ログ専用サーバを投入して、、、となる運び

やっぱ大容量HDが良いですよね?

**動け動けウゴウゴ２ちゃんねる** · 2006/07/28(金) 16:51:59

でも、すぐつぶれるようなのはダメよ

**ｒｅｆｆｉ@報告人 ★** · 2006/07/28(金) 16:54:42

>122
こんなのはどうですか・・・と無茶な注文をしてみるテストｗ

ttp://www.polywell.com/us/servers/PolyServer8400_60TB.asp

**root▲ ★** · 2006/07/28(金) 16:54:47

>>122
ですね。

大容量で、かつできればある程度スケールするしかけがいいですね。

なんていうかようは、めんどいリフレッシュ工事を今後はできるだけやめたいかなと。

おぼろげなイメージとしては「ダイナミックに掲示板サーバから dat を突っ込めて、
それをユーザの要求に応じて効率的にサービスできる memories 相当。
しかも、できれば掲示板サーバの負担を大きくしたくない」

というかんじですか。

**動け動けウゴウゴ２ちゃんねる** · 2006/07/28(金) 16:55:38

800万！

**root▲ ★** · 2006/07/28(金) 16:55:49

>>124
ブツとして何がいいかは、
もっと先(問題や目的がもっと明確になってから)になってから、
考えることではないのかなと。

**動け動けウゴウゴ２ちゃんねる** · 2006/07/28(金) 16:58:16

rootﾀﾝポインヨぶち込まれたのか可哀想に
純粋な評価で増えたんならごめんなさい

**たにし ★** · 2006/07/28(金) 16:59:03

>>125
すべての面でボディブローのように聞いてくるので
リフレッシュ工事は必須です。
かつコストの一番かからない方法です。

古い服は脱ぎ捨てよう。

**動け動けウゴウゴ２ちゃんねる** · 2006/07/28(金) 17:02:04

夢の島いこうぜ

**root▲ ★** · 2006/07/28(金) 17:10:03

>>128
私が PLT でないのはｶﾜｲｿｽ、という運動が巻き起こりました。
で、私は「PLT までは強く望むけど、
そこからは自分への評価でバンバンしたい」って言いました。
ぴったり 10,000 点でぶち込みを止めていただいたことを、とても感謝しているです。

# ここからは、私への評価は普通にやっていただければと。
# しかし DIA や S★ への道は遠い。

>>129
ボディーブローというのは、まさにそうですね。
インデックスとかそのへんも、効いてくるです。

**root▲ ★** · 2006/07/28(金) 17:17:15

私のイメージとしては、

1) 「ファーストプール」(仮称)はローカルに持つ
2) 「整理倉庫」(仮称)は、大容量 HDD を備えた整理倉庫サーバで動かす

というかんじですかね。

で、雪だるまサーバの場合、1) をフロントからも何らかの形で参照できるようにすると。

で、

ライブなdat
↓
ファーストプール
↓
整理倉庫

といったぐあいに、dat は時を経て移りゆくと。

**動け動けウゴウゴ２ちゃんねる** · 2006/07/28(金) 17:20:01

そうとは知らず失礼しました

**外野ｧｧﾝ** · 2006/07/28(金) 17:35:17

>>116
わははははは

**動け動けウゴウゴ２ちゃんねる** · 2006/07/28(金) 17:52:19

管理人のギャグをスルーしたrootﾀﾝ剥奪

**root▲ ★** · 2006/07/28(金) 18:09:20

>>116
Wuhahahahaha. A-hahhahha.

Is it such way? I am not sure ><.

**動け動けウゴウゴ２ちゃんねる** · 2006/07/28(金) 18:10:08

この際（現役板も含めて）過去ログは全部1サーバ（1ドメイン）にまとめようよ！
過去ログを探して鯖移転を逆に追って行くのは大変なんだよ！！

**動け動けウゴウゴ２ちゃんねる** · 2006/07/28(金) 18:12:56

板ごとの移転覆歴一覧表ってどこにもないからな

**動け動けウゴウゴ２ちゃんねる** · 2006/07/28(金) 18:14:07

これは違うのかな？かな？
http://rock.s54.xrea.com/move2/life.html

**動け動けウゴウゴ２ちゃんねる** · 2006/07/28(金) 18:18:43

>>139
そこの管理人さんに負担がいっちゃってるのが現状じゃね？

**たにし ★** · 2006/07/28(金) 18:36:12

>>137
URLが変わっちゃいけないのよ、、、

**要望だけダラダラと** · 2006/07/28(金) 18:40:57

http://qb.2ch.net/operate/kako/1052/10529/1052923573.html
↓
http://memories.2ch.net/operate/kako/1052/10529/1052923573.html

http://qb3.2ch.net/operate/kako/1062/10621/1062137886.html
↓
http://memories.2ch.net/operate/kako/1062/10621/1062137886.html

http://qb5.2ch.net/operate/kako/1084/10844/1084429098.html
↓
http://memories.2ch.net/operate/kako/1084/10844/1084429098.html

http://qb5.2ch.net/test/read.cgi/operate/1150052911/
↓
http://memories.2ch.net/test/offlaw.cgi/operate/1150052911/

read.cgiで見たときは過去ログ入りのメッセージを出すわけだけど、
過去ログサーバにスレッドがあるかどうかの確認は、昨今の流行である(?)
DNSで行おう。
返答は、
html化(.dat)、html化(.dat.gz)、未html(offlaw.cgi)、スレ無し、
の4種類かな。
そうすると、専用ブラウザでも過去ログの確認が容易にできる。

**たにし ★** · 2006/07/28(金) 18:42:55

そうそう
そんな感じのインテリジェットかなぁと

**動け動けウゴウゴ２ちゃんねる** · 2006/07/28(金) 18:43:26

＞141
倉庫落ちしてURLが変わるのは良くて、
板を置くサーバが変わってURLが変わるのは良くて、
過去ログ専用サーバ（ドメイン）に置いてURLが変わるのはダメ？

**要望だけダラダラと** · 2006/07/28(金) 18:47:32

既にmemoriesに格納されている物なら、元のサブドメインでも見られるようにしよう。
バーチャルホストは無しよ、って感じか。

**たにし ★** · 2006/07/28(金) 18:48:37

ぐーぐるとかに載っててくりっくして
結果的にたどりつけるのならOKかと、

◆WMaLhm.gkw · 2006/07/28(金) 18:51:11

RewriteCond %{HTTP_HOST} ^qb3\.2ch\.net$ [NC]
RewriteRule ^(.*)$ http://archive.2ch.net/$1 [R]

mod_rewriteでqb3.2ch.netはarchive.2ch.netに全部飛ばし！
みたいなことやって、qb3とqb5の両方をarchiveに飛ばしたら、
qb3からqb5へのリフレッシュ工事したときに現役datだったものが衝突するしね。

**stream** ◆PNstream2s · 2006/07/28(金) 18:53:48

>>147
前から思ってたんだけど、なんで鯖移転のとき前鯖のdatは消さないでdat落ちにするのかな？
旧鯖と新鯖でスレが衝突するから不便。

**要望だけダラダラと** · 2006/07/28(金) 18:57:51

OK、そういう思想ね。同意同意。

現役サーバの kako/ へのアクセスは、全部過去ログサーバに転送。
http://sss.2ch.net/aaa/kako/bbb...
を
http://memories.2ch.net/aaa/kako/bbb...
ってな風に、元URLから文字列を抜き出して、転送先URLに使うのって、
.htaccessでできたよね？できない？

**動け動けウゴウゴ２ちゃんねる** · 2006/07/28(金) 18:59:27

>>116
バロスｗｗｗｗｗｗｗｗ

**動け動けウゴウゴ２ちゃんねる** · 2006/07/28(金) 19:04:35

＞148
だよねー。
大分前だと、消す時と消さない時とがあったから、必ず残さないと
いけないというわけではないと思うのだけれど、なんなんだろね。
(消すっつっても、実は密かにdat2に残ってたりするけど)

まあ、衝突したら大きい方で上書きで。
key+1 になるのが慣例っぽいけど、それこそ普通に見ていて辿り着けない。

**要望だけダラダラと** · 2006/07/28(金) 19:34:51

改めて目的を書いておこう。

1) 過去ログ置き場を統一することで、探し回る手間が減るという利便性の向上。
2) 大量の過去ログで逼迫している現役サーバの救済。
参考
■ サーバリフレッシュ工事連絡・作業スレッド
http://qb5.2ch.net/test/read.cgi/operate/1119623185/l50

**たにし ★** · 2006/07/28(金) 19:37:28

逼迫している現役サーバってありましたっけ?

**root▲ ★** · 2006/07/28(金) 19:41:06

>>153
tv 系(tv7/tv8)、music系ぐらいですかね。

tv 板あたりは、熱い番組と普通の番組に、板分割の季節なのかも。

**動け動けウゴウゴ２ちゃんねる** · 2006/07/28(金) 19:41:18

後付けの理由に突っ込まないように。

**たにし ★** · 2006/07/28(金) 19:42:22

>>154
HD容量?

**root▲ ★** · 2006/07/28(金) 19:48:25

>>156
そういう意味でしたか。

HDD 容量からいうなら、game10 とか life7 とか hobby7 とかですね。
tiger って、HDD が 36G しかないですから。

**root▲ ★** · 2006/07/28(金) 19:48:47

あと、live22 バックエンドも相当逼迫しているです。

**ｒｅｆｆｉ@報告人 ★** · 2006/07/28(金) 19:49:52

過去ログメニューの値ってあまり信用できないんでしたっけ？
music4は6%しかないと表示されてます。

**root▲ ★** · 2006/07/28(金) 19:52:24

>>159
17% になっていますね。< music4 の掲示板システムでの HDD 使用量

6% は / の使用量だったので、
たぶん過去ログシステムのほうで、/ しかパーティションがないシステムを
想定しているのでしょう。

**たにし ★** · 2006/07/28(金) 19:57:13

music5 つくりますかー

**たにし ★** · 2006/07/28(金) 19:58:06

もうあるし、、、

music4 -> music6 やりますかー

**root▲ ★** · 2006/07/28(金) 20:01:01

>>162
久々のリフレッシュ工事ですか。

今、2つすでに新築の空き家があるんじゃありませんでしたっけ。

**ｒｅｆｆｉ@報告人 ★** · 2006/07/28(金) 20:03:26

お～、久々のリフレッシュですか
上のスレッド出番が久々に役に立ちそうですね。

**root▲ ★** · 2006/07/28(金) 20:03:35

今ある「既にある空き家」はこれか。

banana225.maido3.com (maido3.com標準セッティング)
love3.2ch.net
↓
love4.2ch.net
稼動中の板なし

banana240.maido3.com (maido3.com標準セッティング)
music4.2ch.net
↓
music6.2ch.net
稼動中の板なし

banana365.maido3.com (maido3.com標準セッティング)
human5.2ch.net
↓
human6.2ch.net
稼動中の板なし

あと、リフレッシュ工事のスレに移動しませんか。

あっちにこれ、貼っておくです。

**たにし ★** · 2006/07/28(金) 20:03:43

かも知れないが、、、
当然記憶の藻屑へ

**たにし ★** · 2006/07/28(金) 20:04:41

これやろう

banana240.maido3.com (maido3.com標準セッティング)
music4.2ch.net
↓
music6.2ch.net
稼動中の板なし

**root▲ ★** · 2006/07/28(金) 20:05:31

>>167
こっちに移動しましょうです、しましょうです。

■ サーバリフレッシュ工事連絡・作業スレッド
http://qb5.2ch.net/test/read.cgi/operate/1119623185/

**モーマン☆鯛。** · 2006/07/28(金) 20:06:47

もくずうめえｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗ

**モーマン☆鯛。** · 2006/07/28(金) 20:07:30

うあーすんませんここに書いちゃダメだああああああ

　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　ﾋｯｸ

**root▲ ★** · 2006/07/28(金) 20:07:42

で、私の希望は、

hobby7 → hobby9
life7 → life8
game10 → game11
life22x → live24

あたりですね。
どれも、もう HDD を5割とか、ひどいやつだと6割以上消費しているので。

**root▲ ★** · 2006/07/28(金) 20:08:06

>>169-170

ということで、移動と。

**ｒｅｆｆｉ@報告人 ★** · 2006/07/28(金) 20:38:19

こっち向けの話なので転載

■ サーバリフレッシュ工事連絡・作業スレッド
http://qb5.2ch.net/test/read.cgi/operate/1119623185/160

Apache 2.2.3 Released
Apache 2.0.59 Released
Apache 1.3.37 Released

※セキュリティfix入ってるので緊急適用の必要があるかも

**root▲ ★** · 2006/07/28(金) 20:42:20

>>112
いま気づきました。
ごめんなさい。

見てみるですよ。

**root▲ ★** · 2006/07/28(金) 20:42:57

>>173
む、ちとめんどそうですね。

帰宅後にでも。

**stream** ◆PNstream2s · 2006/07/28(金) 20:44:28

http://pc8.2ch.net/test/read.cgi/mysv/1136360465/103

外部の人に.htaccessいじらせてなければ。
あるいはmod_rewriteでldap:使ってなければ、問題なさげ。

**root▲ ★** · 2006/07/28(金) 20:44:47

>>112
確認しました。おつでした。

**root▲ ★** · 2006/07/28(金) 20:45:39

>>176
> 誰か他人に使わせてて、.htaccessの使用を許可してる場合かな。

なるほど。
緊急度は少し下がったかな。

**ｒｅｆｆｉ@報告人 ★** · 2006/07/28(金) 20:50:55

>176
それなら緊急パッチする必要は無さそうですね。
ただ、2.2系は修正箇所多いので当てる必要はあるのかな？
（2.2以外はセキュリティfixのみ）

**stream** ◆PNstream2s · 2006/07/28(金) 20:58:59

自分でその書き込み紹介しておいてなんですが
ソース見るとなんか違う気がします。
mod_rewrite使ってる場合はもれなくアップデートしなければいけない気が。
>>176の発言は取り消します。

◆TWARamEjuA · 2006/07/28(金) 20:59:52

>>173
m(_ _)m深謝

**root▲ ★** · 2006/07/29(土) 00:19:23

>>180
> mod_rewrite使ってる場合はもれなくアップデートしなければいけない気が。

ふむ。

**動け動けウゴウゴ２ちゃんねる** · 2006/07/29(土) 00:51:24

>>180
まあこんなことも書いてますしねぇ

- Fix security issue in mod_rewrite.
All people using mod_rewrite are strongly encouraged to update.

**root▲ ★** · 2006/07/29(土) 00:57:02

live22x と live23 の過去ログ、
news20 と同様の工事をしてきます。

**root▲ ★** · 2006/07/29(土) 01:06:27

>>184
done.

**たにし ★** · 2006/07/29(土) 04:14:36

どもです

● · 2006/07/29(土) 06:39:46

>>184-185
まだ、過去ログ読めないようなんですが…

**動け動けウゴウゴ２ちゃんねる** · 2006/07/29(土) 07:09:06

http://live20.2ch.net/test/offlaw.cgi
正常

http://live22x.2ch.net/test/offlaw.cgi
cgiが無い

http://live23.2ch.net/test/offlaw.cgi
502 Proxy Error

むむむ

**root▲ ★** · 2006/07/29(土) 11:05:28

>>188
あ、offlaw.cgi 自体を live22/live23b に入れていない予感。

**root▲ ★** · 2006/07/29(土) 11:15:27

offlaw.cgi を入れた。

たまに 502 エラーになるのは、バックエンドが落ちた時に取得をあきらめるための
Proxy Timeout が短すぎるからか。

ちょっと、長くしてみます。

**root▲ ★** · 2006/07/29(土) 11:24:38

<IfModule proxy_module>
# Shorten proxy timeout
ProxyTimeout 5 <= 3秒から5秒に変更
</IfModule>

これで、雪だるまサーバは、

・専用ブラウザからは過去ログを正しく読めるようになった
・公式 P2 や２ちゃんねるプロバイダからも正しく読めるようになったはず(私は未確認)
・ただし read.cgi からは「dat が存在しません」エラーになる、つまり倉庫のファイルを認識できない

という状態になったはず。

**動け動けウゴウゴ２ちゃんねる** · 2006/07/29(土) 11:36:03

Live2ch+●で読めました　ありが㌧

**root▲ ★** · 2006/07/29(土) 12:37:42

>>87
read.cgi ime.st → ime.nu 対応済。

**root▲ ★** · 2006/07/29(土) 12:43:16

>>87-88
bbsd: live22x2 live22 live23b news20b snow 更新済。

**root▲ ★** · 2006/07/29(土) 12:44:00

■ サーバリフレッシュ工事連絡・作業スレッド
http://qb5.2ch.net/test/read.cgi/operate/1119623185/199

・memories 土地作り
・ファイル転送

入ります。

**root▲ ★** · 2006/07/29(土) 19:36:11

>>195
おわり。

DNS変更依頼いきます。
よろしくお願いします。

(現在)
+music4.2ch.net:206.223.147.55

(変更後)
+music4.2ch.net:206.223.151.230

**動け動けウゴウゴ２ちゃんねる** · 2006/07/29(土) 22:04:32

>>189-191

感謝♪

む P219108015041.ppp.prin.ne.jp · 2006/07/29(土) 22:36:39

>>197
お礼は、管理人に言うですよ。
私は実装しただけです。

しかし、このキーボード、意外にちゃんと打てるじゃん。
びくーり。

**動け動けウゴウゴ２ちゃんねる** · 2006/07/29(土) 23:43:05

過去ログの件は乙と言っておく。

**おふぃす** · 2006/07/29(土) 23:49:29

>198
esっすか。
WBSでは馬鹿レポーターが「キーが小さくて打ちづらい」と
毎度おなじみネガティブキャンペーンやってたなぁ。

**動け動けウゴウゴ２ちゃんねる** · 2006/07/30(日) 00:27:39

[es]ならUSBホスト機能あるからUSBキーボード付けても良いんじゃないか？

そういやPRINの前の番号で場所割り出せないんだよな？

株価【1100】 ▲ ◆cZfSunOs.U · 2006/07/30(日) 01:43:18

とりあえず quick hack で対応ですね＜雪だるま過去ログ

で，ぼっとんの方は...... NFS 的なものが使えればそれが一番スマートではあるんですよね．
ライブな dat と違って過去ログでは書き手の競合はまず発生しないはずなんで，
ネットワーク越しに直接 dat 落ちとかやってもいいかも（少なくともロックとかは
あまり考えなくてもよさそう，あとはファイル操作関数のエラーチェックとかを
ちゃんとやるようにすればいいって感じかな），そうなれば現状の各種プログラムも
あまり大きな変更をせずぼっとん導入が可能と......

ただ，その NFS 的なもので実用に耐えるもの，ってのが問題と......
NFS 自体はダメだった，SSHFS もまたしかり．あとは GEOM gate とかですかね．
そのあたりをもう少し探ってみましょうってことで......

株価【1100】 ▲ ◆cZfSunOs.U · 2006/07/30(日) 01:55:19

ストレージサーバは，例えば http://www.sun.com/servers/x64/x4500/
だと 24TB ではありますが >>124 のよりは値段も安くて省スペースかな．といっても
Polywell のじゃないからこれをそのまま導入ってわけにもいかないでしょうけど．

# 「こんなサーバがあったらいい」ってことだと，雪だるまフロント向けに Cool なブレードサーバってのも......

**ひろゆき＠どうやら管理人 ★** · 2006/07/30(日) 01:59:00

>>203
こういうでっかいのって、TB単位で計算すると、
普通に１Uを並べるより安かったりするんすか？

株価【1100】 ▲ ◆cZfSunOs.U · 2006/07/30(日) 02:23:57

う～ん......例えば banana 鯖とかで同じぐらいの容量になる台数買うとか？

**ひろゆき＠どうやら管理人 ★** · 2006/07/30(日) 02:27:48

Single Point of Failureの視点。

株価【1100】 ▲ ◆cZfSunOs.U · 2006/07/30(日) 03:04:53

ん～まぁ >>203 なんかも中身は HDD がたくさん並んでる状態なんで
RAID 設定とかしておけばいいし電源も冗長構成になってるようですが，
普通の 1U を並べれば確かに 1 台死んでもそれで全体がいっせいに死ぬ
ってことはないのかも．まぁそういう物量作戦で行くとして，
設置スペースや消費電力なんかとの兼ね合いも考慮するなら，
ブレードってのも一つの方向かな．

● · 2006/07/30(日) 10:33:56

すみませんすみません、過去ログ取得しようとして↓が出るのは何故か教えて、すみません

http://live23.2ch.net/test/read.cgi/liveanb/1154196827/
1 名前：[ここ壊れてます] 投稿日：[ここ壊れてます]
[ここ壊れてます]

● · 2006/07/30(日) 10:39:12

あ、やり直してたら取得出来ました、すみません

**動け動けウゴウゴ２ちゃんねる** · 2006/07/30(日) 11:20:23

ストレージならDELL/EMCがお勧め。
安いしサポートがいいし事例が豊富だし。

まだ実例こそ少ないだろうけど、
ttp://www1.jp.dell.com/content/products/productdetails.aspx/dellemc_cx3_80?c=jp&l=jp&s=gem
なんかは検討される価値はあるんじゃないでしょうか。

**動け動けウゴウゴ２ちゃんねる** · 2006/07/30(日) 11:26:01

あとOSはRHELもしくはクローン系、つまりLinuxに移行しては？
いまの製品は基本的にRHELで動くように設計されます。
デファクトスタンダードに寄る事でつまんなくなりますけど、
コスト的には余計な物を買う心配は少ないし余計なトラブルも減るんで他の有効な箇所にお金がまわせるようになります。