【カッパドキア】memories 2.0建造委員会２【過去ログ倉庫】

**マァヴ** ◆jxAYUMI09s · 2007/12/19(水) 18:42:38

２ちゃんねるの過去ログを一手に引き受けている
oyster902.peko.2ch.net+sumaもデビューから３年。
1.5TBのストレージはそろそろ満杯だし、フロントエンドも結構いっぱいいっぱい
そろそろ次の過去ログ倉庫を作らないとまずいなぁ・・・・

ってことで、RAID 6 8TBのbanana3000.maido3.comを作ってるんです

開発日記
http://www.maido3.com/server/zousan/

お姿
http://www.maido3.com/server/ebanana/

転送量グラフ
http://traffic.maido3.com/jfj1/McNh/nXAg/

■　ぞうさんからのお知らせ part1
http://qb5.2ch.net/test/read.cgi/operate/1197634004/l50
--------------------------------------------------------------
ここまでのお話
いよいよその姿を現した「ぞうさん（花子）banana3000.maido3.com」
しかし、過酷な試験に花子はくじけてしまいそうなのだった。
負けるな花子、がんばれ花子！

**動け動けウゴウゴ２ちゃんねる** · 2007/12/21(金) 19:13:08

意外とmanidame多いな

**動け動けウゴウゴ２ちゃんねる** · 2007/12/21(金) 19:13:51

まにだめﾜﾛﾀ
てか、誤字をよく見かけるｗプレスリリースとかにもあったような

**動け動けウゴウゴ２ちゃんねる** · 2007/12/21(金) 19:20:34

なんてこったいｗｗｗ

**動け動けウゴウゴ２ちゃんねる** · 2007/12/22(土) 00:26:49

なんか、mamonoと何度か入力してたせいで手が自然にmaと入力してしまっているきがする

**動け動けウゴウゴ２ちゃんねる** · 2007/12/22(土) 00:42:02

BNM<の並びによるタイプミス

**動け動けウゴウゴ２ちゃんねる** · 2007/12/22(土) 00:52:03

namamonoとミスタイプする日も遠くない

**動け動けウゴウゴ２ちゃんねる** · 2007/12/22(土) 01:12:26

namamono鯖ができたりして

**動け動けウゴウゴ２ちゃんねる** · 2007/12/22(土) 01:16:38

すぐ腐るやん・・・

◆NAO/2MXDEk · 2007/12/22(土) 01:43:23

himonoなら腐らないのかな。

**モーマン☆鯛。** · 2007/12/22(土) 02:04:25

mahoroなｒ(ry

**動け動けウゴウゴ２ちゃんねる** · 2007/12/22(土) 02:08:25

http://www.maido3.com/server/ci/hanako.html
これは・・・

**動け動けウゴウゴ２ちゃんねる** · 2007/12/22(土) 02:12:27

>>322
ワロタｗｗｗｗｗｗｗ

**動け動けウゴウゴ２ちゃんねる** · 2007/12/22(土) 02:13:43

花子(*´∀｀)ﾊｧﾊｧ

**動け動けウゴウゴ２ちゃんねる** · 2007/12/22(土) 02:19:05

>>322
吹いたｗｗ

**動け動けウゴウゴ２ちゃんねる** · 2007/12/22(土) 03:34:09

マァヴか

http://www.maido3.com/server/ci/hanako_b.gif

**動け動けウゴウゴ２ちゃんねる** · 2007/12/22(土) 03:38:27

こんなデザインがいいと思うんだ＞花子
http://up2.viploader.net/pic/src/viploader544280.jpg

**動け動けウゴウゴ２ちゃんねる** · 2007/12/22(土) 08:53:47

　　　　　　＿＿　　　_　
　　　　／　　．＼__ノ )
　　　　（＿ノ　　　ﾌ__,ノ
　　　　ﾉ　　( ´∀`)
　　　　/　　凵　　 |コ
　　　(.　　　　　　ｌ　　　　　　　　　
　　　　∪､, 　_　,,ノ
　　　　　　凵凵　

**動け動けウゴウゴ２ちゃんねる** · 2007/12/22(土) 10:33:20

さしずめ、百式は桃か。名の通り魔物か。

この連休、花子の調教も無さそうだし、余興、余興。

**FOX ★** · 2007/12/26(水) 02:38:04

もう実験は終わったのかなぁ
予定を知りたいなぁ、

2007/12/26(水) 02:41:35

このまま調教がない年末なんて
つまらない

**動け動けウゴウゴ２ちゃんねる** · 2007/12/26(水) 02:50:57

ヘタにちょっかい出すと年末年始を吹っ飛ぶｵｶﾝ

2007/12/26(水) 02:52:38

それが待ち遠しい

**動け動けウゴウゴ２ちゃんねる** · 2007/12/26(水) 13:10:44

VIPをyutoriへ移転させないのかな。
年末年始、とくに年越しのVIPに対応するためという意味も持たせて百式作ってたような気がするんだけど。

**動け動けウゴウゴ２ちゃんねる** · 2007/12/26(水) 13:17:36

確か進捗状況は
抜き差しのテストも終わって、ホットスペア追加等の手順も分かった
しかしSumaのようにガチャポンだけで行けないけどどうするよ？
ってな感じだったかと
負荷がかかっている状態でのテストは済んでいますが
この先もテストをする必要があるかどうかは、情勢によって変わるでしょう。

**マァヴ** ◆jxAYUMI09s · 2007/12/26(水) 15:57:41

このあとの予定(^_^;)
あと１つだけ実験やります。予定は明日午前中。
1 一本抜く
2 ホットスペア起動→リビルド開始
3 リビルド中にホットスペア追加（が成功したとして）
4 更に一本抜く
どうなる？(^_^;)

これが終わって、１６本すべてが所定の状態に戻ったら実験終了です。

**動け動けウゴウゴ２ちゃんねる** · 2007/12/26(水) 17:04:58

マァヴさん
2つほど質問させてください

・実験中、サーバーは停止しますか
・今回の勝算はいかほどでしょうか

**マァヴ** ◆jxAYUMI09s · 2007/12/26(水) 17:37:36

>337
・停止するかもしれないししないかもしれない(^_^;)それを確認するための実験だし
・勝算って、どうなったら勝ちなんだろう？(^_^;)動作を確認できればいいわけなんで、勝ち負けはないと思う

**動け動けウゴウゴ２ちゃんねる** · NG

停止どんとこい
VIP931で他に行けない奴らが鯖落とされたらどうなるか
いとをかし

**337** · 2007/12/26(水) 18:17:51

>>338
回答ありがとうございます
実験の趣旨をよく理解してませんでした、ごめんなさい
実験が成功するよう願っています

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 14:43:37

本日の実験結果(^_^;)
やること>336

初期状態
UNIT0 ０-２-３-４-５-６-７-８-９-10-11-12-13-14-15
UNIT1 １　（ホットスペア）

#2を抜いた
UNIT0 ０-2X-３-４-５-６-７-８-９-10-11-12-13-14-15
UNIT1 １　（ホットスペア）

ホットスペアが起動し、#1のリビルドが始まった
UNIT0 ０-1R-2X-３-４-５-６-７-８-９-10-11-12-13-14-15

抜いた#2に新品のHDDを入れ、ホットスペアに設定（#1のリビルドは進行中）
UNIT0 ０-1R-３-４-５-６-７-８-９-10-11-12-13-14-15
UNIT1 ２　（ホットスペア）

#3を抜いた（#1のリビルドは進行中）
UNIT0 ０-1R-3X-４-５-６-７-８-９-10-11-12-13-14-15
UNIT1 ２　（ホットスペア）

ホットスペアが起動し、#2のリビルドが始まった(#1と#2のリビルドは平行して進む)
UNIT0 ０-1R-2R-3X-４-５-６-７-８-９-10-11-12-13-14-15

抜いた#3に新品のHDDを入れ、ホットスペアに設定(#1と#2のリビルドは進行中
UNIT0 ０-1R-2R-４-５-６-７-８-９-10-11-12-13-14-15
UNIT1 ３　（ホットスペア）

今ここ(^_^;)

**動け動けウゴウゴ２ちゃんねる** · 2007/12/27(木) 14:48:55

おぉ(驚)！
やっぱり花子は「かなり賢い」。

**動け動けウゴウゴ２ちゃんねる** · 2007/12/27(木) 14:49:12

毎回ホットスワップの場所変わるの？
エラーランプとか無いみたいだし交換要員が間違ったりしないのかな？

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 14:50:15

わかったこと
１　障害が発生し、ホットスワップが起動したら、障害HDDを新品に交換し、ホットスワップに設置できる
２　リビルド中に新たな障害が発生しても、ホットスワップがあれば機能する
ということで
「実行されているリビルドが２つ以下ならば、故障したHDDをホットスワップ化する」
ことで、連続した障害に対する耐性を向上できることが判明(^_^;)
ただし、現状（つまりリビルド２つ＋ホットスワップ）では冗長性は０です。

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 14:51:34

>343
毎回変わります(^_^;)
ランプは点灯しない（というかない）ので、デッキ番号とポート番号で管理します。
デッキ番号とポート番号は一致しています。

**動け動けウゴウゴ２ちゃんねる** · 2007/12/27(木) 15:00:33

>>345
この後の予定は？

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 15:01:37

>346
実験はこれで終了ですー(^_^;)ってことでいよいよ本題の「memories 2.0建造」かな？

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 15:16:32

現在まだリビルド中(^_^;)ちょいと待ってね
RAIDアレイがすべて平常に戻って、予備HDDがすべて準備完了したら終了宣言の予定

NG

お。お。お。お。（　＾ω＾）
いよいよ本編スタート

**動け動けウゴウゴ２ちゃんねる** · 2007/12/27(木) 15:18:46

お疲れ様です
実験は大成功だったようで、喜ばしいことです
花子のささやきも働いていて心強いですね

２．０いよいよ始動ですか

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 15:20:13

今回は予測通りの動きを示しました(^_^;)
予想外だったのは、リビルドが２つ平行して進む点。
よくできてます＞花子

**root▲▲ ★** · 2007/12/27(木) 15:24:10

>>351
> 予想外だったのは、リビルドが２つ平行して進む点。

ふむー。RAID 6だからってことですかね。

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 15:26:39

>352
RAID5では二つてこと自体発生しないわけで(^_^;)その状況では破綻してるし
RAID6の実装として、一台づつ順次リビルドではなくて、両方同時にリビルドするようになっているようです。
どっちがいいのかっていうと、一台づつのほうが、冗長性+1に速く到達する気もするんですが(^_^;)

**動け動けウゴウゴ２ちゃんねる** · 2007/12/27(木) 15:30:50

1TBのデータ転送、気が遠くなるくらい時間かかりそう。

**root▲▲ ★** · 2007/12/27(木) 15:31:56

なるほど、rebuild の間は wait するんじゃないか、って思っていたということですか。>>353

その動作はなんとなくですが、configurable な気がします。
設定を変えるかどうかは別にして、マニュアルをあたっておくといいかも。

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 15:34:12

>355
あいあい(^_^;)確認します
とはいえ、現状で満足な状態なので、あえて１台づつモードは目指しません
原則、デフォルト（つまりメーカー推奨）を使いこなします。

**動け動けウゴウゴ２ちゃんねる** · 2007/12/27(木) 15:38:52

>>353原理的に０→＋１→＋２よりも０→＋２の方が、ざっと40%程度早いです。
０→＋１と０→＋２の差はだいたい6%ぐらいしかないはずなので、気にするほどではないと思われます。

**root▲▲ ★** · 2007/12/27(木) 15:42:07

>>356
> とはいえ、現状で満足な状態なので、あえて１台づつモードは目指しません

はい、それで問題ないと思います。

>>357
ほほう。

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 16:59:56

ささやいた(^_^;)
リビルド完了～

**FOX ★** · 2007/12/27(木) 17:03:15

おー

2007/12/27(木) 17:03:55

でかした

**root▲▲ ★** · 2007/12/27(木) 17:06:38

さて、次のアクションは、、、。

memories2、本格スタート?

**FOX ★** · 2007/12/27(木) 17:08:38

できる状態になったのかな?

**動け動けウゴウゴ２ちゃんねる** · 2007/12/27(木) 17:09:47

と言うことは今夜あたりVIPは古巣へ？

**動け動けウゴウゴ２ちゃんねる** · 2007/12/27(木) 17:10:27

ＶＩＰはまたお引越し？

**root▲▲ ★** · 2007/12/27(木) 17:11:22

記憶では、

1) システムディスクどうしようか
2) 使ってないネットワークカードが入ってるみたいだけど・・・
3) 長く使い続けるものだから当初から 64bit化、4G mem化したほうがいいんじゃね

ぐらいが課題として出ていたはず。

**root▲▲ ★** · 2007/12/27(木) 17:12:52

>>366
で、
1) は、あえてこのままいく、という手もあるかな、という話をしていたと思います。
もちろん他の T-banana 同様に RAID 1 にするのもありだと思います。

2) は、気にする必要はないでしょう。

3) は個人的には、やっておきたい気がしますね。

**動け動けウゴウゴ２ちゃんねる** · 2007/12/27(木) 17:19:57

ドライバーとかがちゃんとあるんだろうか・・・64bit

**root▲▲ ★** · 2007/12/27(木) 17:21:46

>>368
twa の amd64 用ドライバがあるのは確認済です。

**動け動けウゴウゴ２ちゃんねる** · 2007/12/27(木) 17:32:59

HDD大量に積んでるから、エアフローとか考えても
不必要なカード類は外した方がいいんじゃね？

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 17:33:06

作業完了予定(^_^;)明日の正午
残り作業
・予備HDDのフォーマット

花子自身は完璧に動作しています(^_^;)

**root▲▲ ★** · 2007/12/27(木) 17:38:57

>>371
ハードウェアの予備体制も含め、明日正午にて準備完了と。

ということは、このまま過去ログ倉庫として2chにリリースする、
ということでおｋなのかしら。

**FOX ★** · 2007/12/27(木) 17:39:47

仕様はこのままで行こう。
つまり再インストールとかはなし、当然32bitのまま

ん? 64bitじゃなかったっけ?

**FOX ★** · 2007/12/27(木) 17:40:28

>>372
その方向でここで話し合いをつつけたいなと、

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 17:41:24

現状は32bitです(^_^;)

**root▲▲ ★** · 2007/12/27(木) 17:42:29

>>373
今は32bit版ですね。

banana3000:~$ uname -m
i386

**FOX ★** · 2007/12/27(木) 17:43:05

一回も落ちずにいい仕上がりだと思うな
堅牢そのものに見える。

**root▲▲ ★** · 2007/12/27(木) 17:45:59

現在のスペックは、

標準T-banana - (250G HDD x 2) + 80G HDD + Realtek Network IF x 2
+ (RAID card + 500G HDD x 16)

ということになりますね。

標準T-bananaと同じ、メモリは2Gで、32bit版ということになるです。

**動け動けウゴウゴ２ちゃんねる** · 2007/12/27(木) 17:47:51

>>377
死亡フラグ立ちましたー

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 17:48:27

へへへ(^_^;)おいらもそう思います

で、システムディスクですが・・・・
１RAID 1にする
２RAID 6にユニークデータを置いて、システムディスクはいつでも入れ換え可能にする
３RAID 6にユニークデータのコピーを置いて、システムディスクが壊れたら、そこを読み出せるようにして復旧させる
４このままでいく
５もっと凄いアイデアを考える

３が一番手っ取り早い上に、確実な気がします(^_^;)

**root▲▲ ★** · 2007/12/27(木) 17:48:52

>>377
システムディスクがふっとぶリスクは旧banana程度にはあると思いますが、
その時には単純に HDD 交換(その間は収容している過去ログが見られない)
ってことですね。

RAID 6 のほうは、
ちゃんと設定ができてからは、きちんと動いている様子。

**動け動けウゴウゴ２ちゃんねる** · 2007/12/27(木) 17:50:40

花子からブートするバナナ達、、、

**root▲▲ ★** · 2007/12/27(木) 17:51:07

>>380
2 と 3 の違いは、、、。

symbolic link する、ということかしら。
だとすると、あんまりおすすめできないですね。
RAIDカードに異常が発生すると、復旧作業がしにくいです。

直感的に、1 か 3 じゃないでしょうか。

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 17:52:19

>383
ですです(^_^;)方法論は色々あるかもだけど
ユニークデータをRAID 6上に配置して、そこから読み込んで動くってことです。

**root▲▲ ★** · 2007/12/27(木) 17:52:51

というかきっと、

A) 1 と 3 の組み合わせ
B) 3

のどっちかがいい気がしますね。

1 と 2,3 は互いに独立な手法ですから。

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 17:54:51

くらべてみると(^_^;)
１のメリット
　既知の手法（T-bananaで経験済み）
１のデメリット
　両方ふっ飛ぶことがある(T-bananaで経験済み)

３のメリット
　RAID1より堅牢である
　現状から改変が不要
３のデメリット
　始めてやることである
　１に比べて復旧手順がちょっと複雑

**FOX ★** · 2007/12/27(木) 17:57:21

4で船出して、ぼちぼち3を組み込むに一票。

**root▲▲ ★** · 2007/12/27(木) 18:00:22

あと、思うんですが、
基本的には旧 banana サーバのシステムディスクだけがこわれた時の
リカバリーオペレーションと、
本質的には同じなんではないでしょうか。

単に、データディスクが堅牢になって、
容量がばかでかくなっただけではないかと。

そしてその際のリカバリー手法やノウハウはさすがに、
既に蓄積されているんじゃないですかね。

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 18:00:23

んじゃそれで(^_^;)
どっちにしても４から始まるわけだし
なにはともあれ４でスタートってことで

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 18:01:18

>388
です(^_^;)
４の状態である間は、bananaと同じですー

**root▲▲ ★** · 2007/12/27(木) 18:02:31

>>387
それでいきますか。

>>381 の第一段落の運用ポリシーでいくんであれば、
わたし的には特に異論ないです。

**FOX ★** · 2007/12/27(木) 18:03:06

んじゃ　>>387 でいこう。
始まりはあした。それまで特に反対意見が出なければ

memories2 は船出 !!

**動け動けウゴウゴ２ちゃんねる** · 2007/12/27(木) 18:04:50

明日VIPがyutoriに戻る
でよろしいですか？

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 18:04:56

おー(^_^;)

**FOX ★** · 2007/12/27(木) 18:07:08

>>393
「かもね」くらいです。
大掃除、大掃除。

**動け動けウゴウゴ２ちゃんねる** · 2007/12/27(木) 18:09:36

なんか・・・こわい(^_^;)

**root▲▲ ★** · 2007/12/27(木) 18:11:21

今のバーチャルホストを banana3000 に移したら、
旧 tiger/cobra 達は OS から入れ直して、
いよいよバックヤード系の旧 banana の置き換えにかかろうかと。

年始あたりからぼちぼちと。

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 18:15:09

ちなみにroot付き？　rootなし？(^_^;)

**root▲▲ ★** · 2007/12/27(木) 18:15:42

>>398
banana3000 のことですか。

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 18:15:57

お薦めはrootなしなんだけど（RAIDまわりの扱いがあるので）
過去ログ倉庫の建造ってやったことがないんで、ちと不安(^_^;)

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 18:16:07

>399
ですです(^_^;)

**FOX ★** · 2007/12/27(木) 18:16:27

なしで行きましょ

訓練、訓練　!

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 18:16:54

ぅぃぅぃ(^_^;)

**FOX ★** · 2007/12/27(木) 18:17:08

>>400
中身の心配はおせっかいでは?

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 18:18:12

>404
あー、普通にアカウント作るだけでいいのか(^_^;)了解了解

**root▲▲ ★** · 2007/12/27(木) 18:18:23

なるほど、
そういうことであれば、なしでいいんではないでしょうか。

基本は同じです。
２ちゃんねるには土地を出していただければいいはず。

あとは収容班(私とか)が作業して、
支障があればここで調整でいいんではないかと。

**マァヴ** ◆jxAYUMI09s · 2007/12/27(木) 18:18:50

>406
あいあい(^_^;)

**動け動けウゴウゴ２ちゃんねる** · 2007/12/27(木) 18:25:56

>>406
(・∀・)ゝ

**root▲▲ ★** · 2007/12/27(木) 18:45:28

で、ぱっと思いつくところでは、
ページビュー計測のところですね。

「２ちゃんねるセッティング」して土地を出すということは、
おのおののバーチャルホストごとにページビューが計測される、
というかんじになるですね。

今の memories では httpd.conf を少し細工して、
teri.2ch.net で全部のページビューが計測されるようにしているです。

バーチャルホストが将来、100とかのオーダーになってくると、
今のしくみだと100個、ログ処理プログラムが常駐することになるので、
ここのところは何か、考えておいたほうがいいかもです。

ということで個人的には memories2.2ch.net という、
それ用のバーチャルホストを作って、
ページビュー用のログはもっぱらそこでとられるようにする、
とかいう手法がいいのかもな、と思いました。

いずれにせよこのへんは、実際の収容段階での調整事項ということで。

**動け動けウゴウゴ２ちゃんねる** · 2007/12/27(木) 18:49:10

過去ログが整備されたのなら、一番アクセスが多い過去ログランキングとか出してくれると
累計・年・月・日計ぐらいででると面白いかもー

あったらすまそ、

**root▲▲ ★** · 2007/12/27(木) 18:49:22

ちなみに今のmemoriesには、250個のバーチャルホストが収容されているです。