2ch特化型サーバ・ロケーション構築作戦 Part24

**root▲ ★** · 2006/12/20(水) 00:45:33

2ch特化型サーバ・ロケーション構築作戦のスレッドです。

・２ちゃんねるのサーバロケーション、PIEに関する関連作業・調整事項
・DNS登録・変更関連の各種作業や調整事項
・２ちゃんねるのサーバで採用しているOS、FreeBSDに関する情報・調整事項
・各種作戦・プロジェクトとの連携、プロジェクト間の連携

等を取り扱います。

前スレ:
2ch特化型サーバ・ロケーション構築作戦 Part23
http://qb5.2ch.net/test/read.cgi/operate/1153650861/

**root▲▲ ★** · 2007/01/30(火) 01:19:06

>>555
× aync
○ async

**root▲▲ ★** · 2007/01/30(火) 01:24:38

>>552-553 は対応済み。
squid-2.6 が差分転送できるようになったとか、
HTTP/1.1 ベースになったとかだと、うれしいのかも。

株価【1200】 △ ◆cZfSunOs.U · 2007/01/30(火) 03:33:35

>>557 Squid の場合，クライアントから Range リクエストを受けると，
上流サーバには Range なしリクエストを発して全コンテンツを
取得・キャッシュした上でクライアントに部分コンテンツを返す，
ということのようです．つまり，クライアント - Squid 間は
差分転送をサポートしますが，Squid - 上流サーバ間は
差分転送しないってことですね．まぁ 2ch の dat のように，
末尾に追記される形で更新されるコンテンツというのはむしろ特殊で，
少なくとも普通の HTML ドキュメントなどではまずあり得ないですからね．

あと，HTTP バージョンは 1.0 のままですね．ただ，
2.6 になって ETag と Vary をサポートするように
なったということで，HTTP/1.1 の機能の取り込みは
徐々に進んできてるようです．

むしろ，機能的な面で 2.6 では kqueue をサポート
するようになった，っては注目点かもですね．
crawld でも使ってますが，多数の fd をポーリングする際には
伝統的な select() や poll() より効率はいいようなので．

**root▲▲ ★** · 2007/01/30(火) 11:01:16

>>558 第一段落
そういえばそうでしたね。この件は前にも話しました。
基本的に変わっていないっぽいですか。

第二段落
1.0 のままな理由って、何か積極的にあるのかしら。

で、kqueue サポートですか。
パフォーマンス向上の点ではでかいですね。
やばくなってきたら、様子を見てまた延命(2.6系に更新)するかんじで。

**root▲▲ ★** · 2007/01/30(火) 11:05:20

あと考えられる延命は、
- フロントを FreeBSD 6.xR に更新する
- フロントの squid を libthr で動かす
- BG3/BG4 の squid を rtprio して動かす(これは今やってもいいかも)

あたりかなと。
フロントでも squid 動かしたので、BG3/BG4 で入れたものは、
きっと入れられるかなと。

**動け動けウゴウゴ２ちゃんねる** · 2007/01/30(火) 22:09:30

Squid2.6はCOSSを使うためだけにバージョンアップした。
diskdよりも負荷少なくていいよ。

**root▲▲ ★** · 2007/01/30(火) 23:10:53

>>561
ふむふむ。

COSSって 2.5 系にも記述はあったような気がしますが、
2.6 ではちゃんと動く、というかんじなのかしら。

**root▲▲ ★** · 2007/01/30(火) 23:17:57

■ サーバリフレッシュ工事連絡・作業スレッド３
http://qb5.2ch.net/test/read.cgi/operate/1169662973/391

DNS変更申請をお願いします。

・memoriesへの収容

(現状)
+pc7.2ch.net:206.223.147.60
+pc8.2ch.net:206.223.148.200

(変更後)
+pc7.2ch.net:206.223.151.230
+pc8.2ch.net:206.223.151.230

株価【1400】 △ ◆cZfSunOs.U · 2007/01/31(水) 00:27:17

>>562 2.6 では fixes や improvements が結構入ってるっぽいですね＜COSS

**root▲▲ ★** · 2007/01/31(水) 01:02:00

c-docomo系とc-au系で、
>>560
> - フロントの squid を libthr で動かす

を実行した。
# はやくも libpthread での限界近くまで使われていた。

c-others系はFreeBSD 5.3Rでlibthrに不安があるのと、
まだ何とかなりそうな感じなので、そのまま。

**root▲▲ ★** · 2007/01/31(水) 01:09:54

あと c-others 系は ccd 入れて内部で RAID 0 にしているので、
ディスクアクセスが楽、というのはあるですね。

# c-au / c-others は IDE 1本構成。

**root▲▲ ★** · 2007/01/31(水) 01:21:18

>>566
> # c-au / c-others は IDE 1本構成。
c-others は c-docomo の間違い。

**root▲▲ ★** · 2007/01/31(水) 01:37:24

…で、今度は squid にばかり CPU とられて、
httpd の処理が追いつかなくなってしまった。

難しいすね。
のろくてもつながるほうで動かすか。
元に戻します。< c-docomo/c-au

株価【1400】 △ ◆cZfSunOs.U · 2007/01/31(水) 01:48:21

>>568 かつての雪だるまバックエンド（httpd に CPU を食われて
bbsd が働けなかった）と逆の状態ですか．だとすると，
squid の優先度をいくらか下げてみるとか......

**root▲▲ ★** · 2007/01/31(水) 01:59:31

ディスクキャッシュがたまりすぎだった模様。

# BG3/BG4 と同じ設定(32G)になってた。
# とりあえずキャッシュクリアして、1Gに減らしてみた。

**root▲▲ ★** · 2007/01/31(水) 02:01:31

あとは、HDD 触らない(メモリキャッシュだけ)の設定にするぐらいですかね、、、。

**root▲▲ ★** · 2007/01/31(水) 02:01:57

>>569
squid の優先度を下げるのは、httpd が満員になってしまうようです。

**root▲▲ ★** · 2007/01/31(水) 02:09:11

c-docomo5 だけ、

# null
cache_dir null /dev/null

にしてみた。(>>571)

しばらく観察。

**root▲▲ ★** · 2007/01/31(水) 02:11:48

あきらかに TCP_MISS が増えるなぁ。
これだと黒山羊にインパクトいくですね。
やはり、少しでもディスクキャッシュは必要と。

**root▲▲ ★** · 2007/01/31(水) 02:15:57

何もしてない間に、c-docomo7 に ping がかからなくなった、、、。ううむ。

**動け動けウゴウゴ２ちゃんねる** · 2007/01/31(水) 02:17:31

> 何もしてない間に
ありゃりゃ・・・

株価【1400】 △ ◆cZfSunOs.U · 2007/01/31(水) 02:19:49

Squid 2.6 にしちゃうとか......

**root▲▲ ★** · 2007/01/31(水) 02:20:31

困ったですね。

上がらないようなら、
朝になったら改めて、リブート要請入れるです。

**root▲▲ ★** · 2007/01/31(水) 02:21:33

>>577
それも考えますかね、、、。

一度寝て、午前の時間使って時間見て作業するです。
そのほうが携帯系は軽いですし。

**root▲▲ ★** · 2007/01/31(水) 10:12:23

HDDを触るとやはり相当つらいので
(例えばネットワークパケットをぼろぼろ落としたりするみたい)、
c-docomo/c-au系には >>573 の設定を入れた。

**root▲▲ ★** · 2007/01/31(水) 11:43:58

2007/01/30 18:42:11| WARNING! Your cache is running out of filedescriptors
2007/01/30 18:42:27| WARNING! Your cache is running out of filedescriptors
2007/01/30 18:42:43| WARNING! Your cache is running out of filedescriptors
2007/01/30 18:42:59| WARNING! Your cache is running out of filedescriptors
2007/01/30 18:43:15| WARNING! Your cache is running out of filedescriptors
...

ううむ。@ c-docomo系

**root▲▲ ★** · 2007/01/31(水) 11:45:07

> descriptors 16384

これでも足りない? ううむ。

**root▲▲ ★** · 2007/01/31(水) 11:53:16

【Love Affair】携帯からのアクセスに対する考察・次の一手 Part4
http://qb5.2ch.net/test/read.cgi/operate/1116860379/56

(´･ω･｀)

あとで変えておくです。

**root▲▲ ★** · 2007/01/31(水) 11:57:40

>>583
done at c-docomo[567]

# c-au/c-othersは過去にsquid動かした時に既に変えていました。

**root▲▲ ★** · 2007/01/31(水) 13:12:47

で、流れてしまったので。

現在のDNS変更作業待ち: >>563

**マァヴ** ◆jxAYUMI09s · 2007/01/31(水) 13:45:54

>563
done(^_^;)

**root▲▲ ★** · 2007/01/31(水) 15:09:02

sibling(同僚)を増やすと、FD を使い果たすようなので、
互いに同僚にするのをやめにした。

親2つ(BG3/BG4)で動いているです。< c-docomo/c-au

**root▲▲ ★** · 2007/01/31(水) 19:08:06

BG3/BG4の同僚設定もやめた。
理由はFDのあふれ、、、。

**マァヴ** ◆jxAYUMI09s · 2007/01/31(水) 20:53:23

こっちにも(^_^;)
-----------------------------------------------------------
電源工事、１時間繰り上がって日本時間21:30より開始になりました。
２ｃｈのサーバは21:00～21:30の間にシャットダウンします(^_^;)

**root▲▲ ★** · 2007/01/31(水) 23:51:23

>>589
帰宅後に光の速さでシャットダウン掛けましたが、数台落とせなかったサーバがありました。
が、実害はなかった模様。

で、明日もあると。

**root▲▲ ★** · 2007/02/01(木) 00:13:40

サーバーダウン（鯖落ち）情報 part131
http://qb5.2ch.net/test/read.cgi/operate/1170245004/449
> 2pix.2ch.se の HDD がまずいですね。
> read error が出続けています。
> シャットダウン時刻に間に合わなかったサーバか、、、。

中身確認して、緊急にバックアップとります。

**root▲▲ ★** · 2007/02/01(木) 00:19:07

HDDがとんだ模様。
ad1s1d というと、どこだ、、、。

Jan 31 07:18:01 <0.2> banana613 kernel: ad1: FAILURE - READ_DMA status=51<READY,DSC,ERROR> error=40<UNCORRECTABLE> LBA=35764863
Jan 31 07:18:01 <0.2> banana613 kernel: g_vfs_done():ad1s1d[READ(offset=18311577600, length=16384)]error = 5
Jan 31 07:18:03 <0.2> banana613 kernel: ad1: FAILURE - READ_DMA status=51<READY,DSC,ERROR> error=40<UNCORRECTABLE> LBA=35764863
Jan 31 07:18:03 <0.2> banana613 kernel: g_vfs_done():ad1s1d[READ(offset=18311577600, length=16384)]error = 5
Jan 31 07:18:05 <0.2> banana613 kernel: ad1: FAILURE - READ_DMA status=51<READY,DSC,ERROR> error=40<UNCORRECTABLE> LBA=35764863
Jan 31 07:18:05 <0.2> banana613 kernel: g_vfs_done():ad1s1d[READ(offset=18311577600, length=16384)]error = 5
Jan 31 07:18:07 <0.2> banana613 kernel: ad1: FAILURE - READ_DMA status=51<READY,DSC,ERROR> error=40<UNCORRECTABLE> LBA=35764863
Jan 31 07:18:07 <0.2> banana613 kernel: g_vfs_done():ad1s1d[READ(offset=18311577600, length=16384)]error = 5
Jan 31 07:18:10 <0.2> banana613 kernel: ad1: FAILURE - READ_DMA status=51<READY,DSC,ERROR> error=40<UNCORRECTABLE> LBA=35764863
Jan 31 07:18:10 <0.2> banana613 kernel: g_vfs_done():ad1s1d[READ(offset=18311577600, length=16384)]error = 5
Jan 31 07:18:12 <0.2> banana613 kernel: ad1: FAILURE - READ_DMA status=51<READY,DSC,ERROR> error=40<UNCORRECTABLE> LBA=35764863
Jan 31 07:18:12 <0.2> banana613 kernel: g_vfs_done():ad1s1d[READ(offset=18311577600, length=16384)]error = 5

**root▲▲ ★** · 2007/02/01(木) 00:20:04

/dev/ad1s1d 75661254 4745302 64863052 7% /home

/homeか、、、。

どのくらいまでとれるかわかりませんが、これからバックアップとります。
httpd 切ります。

**動け動けウゴウゴ２ちゃんねる** · 2007/02/01(木) 00:23:11

>>592
これどこのログ？ mesege?

**root▲▲ ★** · 2007/02/01(木) 00:25:51

1箇所、しくっているところがある模様。

DUMP: read error from /dev/ad1s1d: Input/output error: [block 35764800]: count=16384
DUMP: read error from /dev/ad1s1d: Input/output error: [sector 35764820]: count=512

しかしそれ以外は、昨日早朝のバックアップがとれている模様。

**root▲▲ ★** · 2007/02/01(木) 00:26:16

>>594
/var/log/messages

**root▲▲ ★** · 2007/02/01(木) 00:27:06

昨夜までのバックアップデータを、memories に転送中。

**root▲▲ ★** · 2007/02/01(木) 00:29:01

いろいろ調査中、、、。

banana613 = 2pix.2ch.se の HDD 破損は、どうも今日の作業でなったのではなく、
先般の2回ほどあった停電の際に、HDD の一部がしくっていた模様。

**root▲▲ ★** · 2007/02/01(木) 00:37:12

HDD がしくっているところ以外の/homeのバックアップは、
少なくとも昨日までのものはとれている模様。

2台あるHDDのうちの1台(/homeの方)がやられたので、
バックアップをうまく転送でき、戻せることが確認できた後は、
HDD交換手配ということで。

株価【E】 · NG

rootさん乙です
頑張って下さい＞＜

**マァヴ** ◆jxAYUMI09s · 2007/02/01(木) 00:41:42

いつでもOK(^_^;)言ってくださいな

**マァヴ** ◆jxAYUMI09s · 2007/02/01(木) 00:51:09

新しいサーバを１台root付きで出します。
こっちに移転ってことで作業すすめるのでいかが？(^_^;)

**root▲▲ ★** · 2007/02/01(木) 00:54:08

昨日のバックアップの memories への転送完了。
これからちゃんと戻せるかどうか確認します。

その後、今のもののバックアップをできるだけとります。
次に HDD 交換手配かけます。

交換手順(現地にどのようにオーダーするか)は、
別途ここに書きます。

**root▲▲ ★** · 2007/02/01(木) 00:55:25

>>602
それでも問題ないです。

**マァヴ** ◆jxAYUMI09s · 2007/02/01(木) 00:56:49

あいあい(^_^;)
作戦概要
１　613のバックアップ終了（む）
２　新しいサーバを613として仕立てる（中の人）
３　新しい613ができたらrootを渡す（中の人→む）
４　あとはお任せ(^_^;)

こんな感じで(^_^;)

**root▲▲ ★** · 2007/02/01(木) 00:57:52

でも /home のHDDの交換で戻せるほうが、私としては正直楽かも。

**マァヴ** ◆jxAYUMI09s · 2007/02/01(木) 00:58:26

現在の613のアカウント名情報教えてくださいな(^_^;)

**マァヴ** ◆jxAYUMI09s · 2007/02/01(木) 00:58:54

あー、アカウントはむむむさんが作るのか(^_^;)

**root▲▲ ★** · 2007/02/01(木) 00:59:01

>>605
ふむ、だとすると banana613 の名前やIPアドレスそのままに、新しいサーバになる?
ということですか。

**root▲▲ ★** · 2007/02/01(木) 00:59:44

>>608
ですね。なので普通にroot権限ありサーバ(ただOSが入っていればOK)、
の状態で、渡していただければokです。

**マァヴ** ◆jxAYUMI09s · 2007/02/01(木) 00:59:45

>609
IPは変更になるかも(^_^;)
そのままのほうがいい？

**root▲▲ ★** · 2007/02/01(木) 01:00:46

>>611
bananaの番号やIPアドレスは変更になっても問題ないと思います。
ぶつは通常の10Mbps/80GBx2/512M memoryのものなので、
普通でよいと思います。

**マァヴ** ◆jxAYUMI09s · 2007/02/01(木) 01:01:29

>612
んでは>605コースでー(^_^;)

**マァヴ** ◆jxAYUMI09s · 2007/02/01(木) 01:04:57

2pix.2ch.seのDNS書き換えてよくなったら教えてくださいー(^_^;)

**マァヴ** ◆jxAYUMI09s · 2007/02/01(木) 01:05:53

作戦概要(改)(^_^;)
１　613のバックアップ終了（む）
２　2pix.2ch.seのDNSレコードを新サーバに振る
３　新しい613ができたらrootを渡す（中の人→む）
４　あとはお任せ(^_^;)

こんな感じで(^_^;)

**root▲▲ ★** · 2007/02/01(木) 01:06:53

では 2pix.2ch.se は新サーバに移し変えるということで、
うつわのほうは、渡され次第私のほうで作業はじめます。
ただし、明日は停電等あるので、作業はやや時間かかるかもです。

banana613は退役になるという前提で、
現在のもののバックアップ(とれる限りのもの)は、私のほうでしかけておきます。

**マァヴ** ◆jxAYUMI09s · 2007/02/01(木) 01:07:59

>616
了解です(^_^;)
退役ししだいDNS書き換えます。
退役予定はこのあとすぐかな？

**root▲▲ ★** · 2007/02/01(木) 01:11:46

結構データがたくさん入っているようで、
かつエラーが出ているHDDから読んでいるので、
バックアップに時間を要しそうです。

退役予定は、たぶん明日の昼ぐらい。
たぶんですが第2回目の電源工事よりも前には、退役になる見込みで。

**マァヴ** ◆jxAYUMI09s · 2007/02/01(木) 01:14:08

了解(^_^;)
TTLが一日だったので、こちらもちと時間がかかります。
300に変更しますー

◆A/T2/75/82 · 2007/02/01(木) 01:15:10

なおるまでは２証はお休みということで、

**マァヴ** ◆jxAYUMI09s · 2007/02/01(木) 01:15:17

質問
明日の昼までhttpdを上げないってことは
もう2pix.2ch.seは振りなおしてOKだよね？(^_^;)

**マァヴ** ◆jxAYUMI09s · 2007/02/01(木) 01:16:00

>620
ぅぃぅぃ(^_^;)

**動け動けウゴウゴ２ちゃんねる** · 2007/02/01(木) 01:17:10

>>620
では、今出してる注文は取り下げたほうがいいですか？

◆A/T2/75/82 · 2007/02/01(木) 01:18:13

>>623
ほとんど動かないけど
売買はできたりする予感

**動け動けウゴウゴ２ちゃんねる** · 2007/02/01(木) 01:19:14

売買はできてますー

ついでにガチャも。

**動け動けウゴウゴ２ちゃんねる** · 2007/02/01(木) 01:19:20

>>624
では、売買自体は止めないんですか？
普通に売買してますが・・・。

◆A/T2/75/82 · 2007/02/01(木) 01:20:18

各種統計等がうごかないのだー

**root▲▲ ★** · 2007/02/01(木) 01:20:39

>>621
よいです。

>>624
バックアップをとる際に、cron も止めました。
2pix が落ちると、できなくなるのは何でしたっけ。

**root▲▲ ★** · 2007/02/01(木) 01:20:50

>>627
なるほどです。

**root▲▲ ★** · 2007/02/01(木) 01:22:20

あと、HDD が一部破損したので、
一部データやプログラムが、ふっとんでいる可能性があるです。

**マァヴ** ◆jxAYUMI09s · 2007/02/01(木) 01:22:34

・TTL=300に設定した(^_^;)
・rootさんにroot情報送った

そんでは１０分後にDNSを新しいサーバに振り替えます(^_^;)
問題ある人は１０分以内にレスしてくださいー

**マァヴ** ◆jxAYUMI09s · 2007/02/01(木) 01:23:20

あ、ちなみに今回DNSの浸透には24時間かかる見込みです(^_^;)

◆A/T2/75/82 · 2007/02/01(木) 01:26:13

>>630
従のサーバだから
動かしているうちにデータはそろう予感。(たぶん)

プログラムが破損していたらなおさなきゃだけど
私のローカルにも・・・　あればいいなぁということで

◆A/T2/75/82 · 2007/02/01(木) 01:26:50

>>631
意味なしﾉ

◆A/T2/75/82 · 2007/02/01(木) 01:27:58

異議なしだった

**マァヴ** ◆jxAYUMI09s · 2007/02/01(木) 01:28:11

意味ないのかよ・・・orz(^_^;)

**root▲▲ ★** · 2007/02/01(木) 01:28:56

>>631
受け取りました。

**マァヴ** ◆jxAYUMI09s · 2007/02/01(木) 01:32:08

書き換えます(^_^;)

**動け動けウゴウゴ２ちゃんねる** · 2007/02/01(木) 01:33:55

あれ？カナ打ちじゃない？

**マァヴ** ◆jxAYUMI09s · 2007/02/01(木) 01:36:17

ということで(^_^;)
・新サーバの受け渡し完了
・DNSは24時間ほどで浸透
・banana613は退役予定（rootさんが宣言し次第退役）
・中身は頑張って復旧させる
ってことで(^_^;)

**root▲▲ ★** · 2007/02/01(木) 01:56:11

1) いくつかエラーが出るものの、
とりあえず復活できるものは復活できる(昨日のバックアップ)(by dump)

2) 今現在の/homeをバックアップをとり中、
I/Oエラーが最初の方で18回ほど出たものの、そこをスキップして進行中(by tar)

という状況です。
2pix ユーザの httpd / cron は止めてあります。

新しいサーバのほうは、流しておけばいいプログラムについては流しはじめました。
あとの作業は明日以降ということで、徐々に寝る方向へと。

**動け動けウゴウゴ２ちゃんねる** · 2007/02/01(木) 02:23:07

最近妙に重かった時間があったのもこれかな？

**root▲▲ ★** · 2007/02/01(木) 10:40:24

>>641
tar と dump でのデータの救い出しはほぼ完了。
/home は umount 状態にしました。
もう fsck でも clean な状態にはならず、read only でしか mount できません。

一応ブートアップはするので、
停電後も保留(電車だと線路上留置ぐらい)でお願いします。 < b613
数日のうちには退役→電源オフの方向で。

新しいほうはハードウェアの異常なしを確認し、
OSの更新まで完了しました。

本日昼間は本業多忙と停電対応のため、2pix関係の作業はたぶんここまでで。

**マァヴ** ◆jxAYUMI09s · 2007/02/01(木) 13:35:22

了解ですー(^_^;)

**root▲▲ ★** · 2007/02/02(金) 13:02:02

2pix.2ch.se は、現在とれているバックアップ(一部失われているかも)を
そのまま入れ込んで、とりあえず動かしてみようかと思っていますです。

**動け動けウゴウゴ２ちゃんねる** · 2007/02/02(金) 13:09:27

おおお！
まもなく復活か！？

**root▲▲ ★** · 2007/02/02(金) 17:01:19

2pix.2ch.se 動かし始めました。
観察中、、、。

まずい点があれば、報告おながいします。

**動け動けウゴウゴ２ちゃんねる** · 2007/02/02(金) 17:11:07

乙です。
復帰うれしー

**root▲▲ ★** · 2007/02/02(金) 17:16:46

これでしばらく動かして問題なければ、
banana613 は退役ということでよいと思いますです。

**動け動けウゴウゴ２ちゃんねる** · NG

ｷﾀﾜｧ*･ﾟﾟ･*:.｡..｡.:*･ﾟ(ｎ‘∀‘）ηﾟ･*:.｡. .｡.:*･ﾟﾟ･* !!!!!

株価【1200】 · 2007/02/02(金) 17:37:31

優待復活？

株価【1200】 · NG

ﾔﾀｰrootさんありがとー

**動け動けウゴウゴ２ちゃんねる** · 2007/02/02(金) 22:30:39

rootたんありがとう。　
お疲れさまです！！

**動け動けウゴウゴ２ちゃんねる** · 2007/02/03(土) 00:08:47

my menuなどの取引状況がリセットされてないね＞株

**root▲▲ ★** · 2007/02/03(土) 10:20:32

<チラシの裏>
http://qb5.2ch.net/test/read.cgi/operate/1169758672/177

libapreq2 標準セッティングに追加へと。
作業はぼちぼちという感じで。
</チラシの裏>