2ch特化型サーバ・ロケーション構築作戦 Part34

2ch サーバーダウン（鯖落ち）情報　part252
http://qb5.2ch.net/test/read.cgi/operate/1252568804/854

854 ：動け動けウゴウゴ２ちゃんねる ：2009/10/01(木) 17:14:46 ID:DDQbtsNl0(7)
gimpo死亡のお知らせ｡･ﾟ･(ﾉД`)･ﾟ･｡

> tiger3515.maido3.com につきましてご連絡いたします。
>
> tiger3515 のサーバー再起動にあたり、
> データセンタースタッフが手動でリブート及び FSCK を
> 実行しましたが、ハードディスクに致命的なエラーが見つかり、
> サーバーを正常に起動する事が出来ない状態となっております。
> そのため、tiger3515 にかわる新しいサーバーを大至急で手配しております。

-----------------------
ほんとか、どうか、ボクにはわからないけど、
だれかが、リブート要請してくれて、
こうゆう、メールを、受け取ったそうです。

　　　＊＊

　　　　　ギンポサーバー、機械的に、故障！！

　　　　　　　　　　　　　　　　　　　　　　　＊＊

gimpoのHDD死亡しちゃったのか…
片方故障してるchangiやnamidameより早く逝くとは…

詰め込みすぎてたのが原因なのかな

root有り鯖でPIEにRAID操作を許可するわけにもいかないだろうし・・・

帰宅中。
gimpoについては帰宅後に中の人と連絡とってみる予定。

>>758
電車の中でゆっくり休んでください。

現在の状況は >>755 ということなのかしら。

流れとしてはこんな感じ
http://qb5.2ch.net/test/read.cgi/operate/1252568804/396
> tiger3515にpingは通るんだよなあ
> リブート要請スレ落ちてるみたいだけど要請しちゃっていいのこれ？
http://qb5.2ch.net/test/read.cgi/operate/1252568804/411
> gimpo.2ch.net/tiger3515.maido3.com
> リブート要請いきま
http://qb5.2ch.net/test/read.cgi/operate/1252568804/440
> あらら
> > 緊急連絡フォームよりご依頼いただきました
> > tiger3515.maido3.com の再起動につきまして、
> > 遠隔操作によりサーバーの再起動を試みましたが
> > サーバーはオンラインになりません。
> >
> > 現在、データセンタースタッフに手動でサーバーを
> > 再起動するよう要請いたしております。
> >
> > 詳しい情報が入り次第、随時ご連絡いたします。
> > 作業完了まで今しばらくお待ちください。
http://qb5.2ch.net/test/read.cgi/operate/1252568804/484
> 完了のメールは届いたけどまた落ちてるかもしれん
> > 緊急連絡フォームよりご依頼いただきました
> > tiger3515.maido3.com の再起動が完了いたしました。
> >
> > 弊社インターネット環境から
> > ping の応答とウェブページの表示を確認しました。
> >
> > お客様の環境からはいかがでしょうか。
> > お気づきの点などございましたらお気軽にお問い合わせください。
> >
> > どうぞよろしくお願いいたします。
http://qb5.2ch.net/test/read.cgi/operate/1252568804/523
> 中の人から御連絡頂きました
> もうしばらく待たれよ
> > 緊急連絡フォームよりご依頼いただきました
> > tiger3515.maido3.com の再起動につきまして、
> > 先ほど再起動完了のご連絡を差し上げましたが、
> > 再びオフラインになっています。
> >
> > データセンタースタッフに tiger3515 再起動の
> > 進捗を確認しております。
> >
> > 詳しい情報が入り次第、改めてご連絡いたします。
> > 復旧まで今しばらくお待ちください。
http://qb5.2ch.net/test/read.cgi/operate/1252568804/606
> >>596
> 現在FSCK中ー
> > 現在 tiger351 はサーバー起動後の FSCK を実行中です。
> > FSCK が完了しましたら再度サーバーの再起動を行い
> > 復旧完了となります。
http://qb5.2ch.net/test/read.cgi/operate/1252568804/854
> gimpo死亡のお知らせ｡･ﾟ･(ﾉД`)･ﾟ･｡
> > tiger3515.maido3.com につきましてご連絡いたします。
> >
> > tiger3515 のサーバー再起動にあたり、
> > データセンタースタッフが手動でリブート及び FSCK を
> > 実行しましたが、ハードディスクに致命的なエラーが見つかり、
> > サーバーを正常に起動する事が出来ない状態となっております。
> > そのため、tiger3515 にかわる新しいサーバーを大至急で手配しております。

>>760
そのレスの真偽は確認されていませんが、gimpoが落ちているのは確かかと。

なんという冗長性のなさ

>>762
761で確認されたのか
リブート要請スレがさっき立ったばかりだったからな・・・

どもです。

一度おかしくなってリブートで復旧したもののすぐにまたダウンして、
今度はfsckが通らなくなり、
現在代替サーバを至急手配している、
というかんじですか。

77 名前：動け動けウゴウゴ２ちゃんねる[sage] 投稿日：2009/10/01(木) 18:06:36 ID:3S6ZoETRP
【ニダーラン】【新規大歓迎】交易所<^_^;>★57
http://tsushima.2ch.net/test/read.cgi/news/1254301132/289,294

289 モズク [sage] 2009/10/01(木) 17:30:07.83 ID:5oMOL6gL
ところで・・・gimpoの代替鯖の手配はどうなったの

294 マァヴ ◆jxAYUMI09s [] 2009/10/01(木) 18:04:41.54 ID:UIGPAIIT BE:4849463-DIA(104664)
http://img.2ch.net/ico/sii_kouji.gif
>>289
淡々と進行中でないかな？(^_^;)普通に

リモートでリブート→だめ
現地でのリブート→一瞬オンラインになったもののだめ
再度現地でリブート→fsckでだめ

まとめるとこんな感じですね

ちなみに死亡フラグ

2ch サーバーダウン（鯖落ち）情報　part252
http://qb5.2ch.net/test/read.cgi/operate/1252568804/361-362

361 名前： 動け動けウゴウゴ２ちゃんねる [sage] 投稿日： 2009/09/29(火) 22:54:12 ID:XaA7U6HT0
gimpoの負荷が何気に高いですねぇ〜

362 名前： 動け動けウゴウゴ２ちゃんねる [sage] 投稿日： 2009/09/29(火) 23:57:11 ID:7HDsQzh90
gimpoがこの時間負荷高いのはデフォ
やっぱり7200rpmHDDじゃ100板ぐらいが限界なのかな

でもgimpoって何気に強い。一時期195板抱えてたし、今でも175板あるし、
塩P鯖落ち事件で鯖落ち難民が二軍に押し寄せたときもいつもより負荷が高くなっただけで落ちなかったし

中の人と連絡とりました via email
以下状況。

何等かのトラブルが発生してサーバダウン中
電源は入っている状態（少なくとも電源は無事）
代替サーバ手配中、tigerの3500番台
調査用KVM手配済、手配完了後に連絡いただけるとのこと
携帯電池切れ寸前。電車は混雑荷より遅れ中

次は自宅からの予定。

きたく。
メールチェック中。

> PIE スタッフによりサーバーの再起動及びfsckを実行いたしましたが、
> "Fatal Double Fault" によりサーバーがフリーズする状態が発生しております。

HDDじゃなくて、マザボとかかもしんないですね。< 障害箇所

rootたん帰ってｷﾀｰ(運用板につきAA略)

状況は >>769 ということで、座して待ち中。

もし少ない鯖に板をまとめるなら、RAID10しなきゃだめかもね。

>>771
返答次第だとは思いますが、マザボ*だけ*なら代替機から
過去レス移行できそうですね。
まあ、どのチップが逝ってしまわれたかによると思いますが。

トラブルの原因はHDDの破損なのかどうか、まだわかんないです。>>774

今出来ることは鯖が来るまで待てというだけ？

>>775
マザボだと復旧作業(データ吸出し)中またおかしくなるかもしれないですね。

どうしてもだめならかつての yutori7 の時のように、
HDD を別サーバに付け替えるとか、そのへんは臨機応変にというかんじで。

>>777
データの無事を祈る

rootﾀｿの予想を教えてください！＞＜*

gimpoサーバの復活はいつになる?
http://tako8.ula.cc/gimpo/?guid=ON

五輪の結果と鯖が来るのどちらが早いか祈りながら待つか。

>>780
> サービスがいきなりなくなったりと

サービスか、ちょと、びくーりした。

>>778
その場合だと、またサーバ１台なことになりそうですね

状況は今後解析して分かるかと思いますので
余裕があるときに見ておくと末吉でしょうね。

代替サーバは基本インストールが完了、納品チェック中との連絡あり。
(root権限つきサーバの代替のため、root権限つき)

KVMの接続は少し遅れ、10月2日午前中となるとのこと。(´･ω･｀)

代替サーバの方が先に来そうなかんじ。
アカウント情報受け取ったら、セットアップ作業すすめます。

乙です乙です,

データの移転は無しの方向？

代替用サーバができたようです。
これからログインして中身確認します。

代替サーバにログイン、su完了。
dmesgによるハードウェア仕様確認。(A-tiger2009)
ネットワーク100Mbps接続。

受け取り完了ということで、たんたんとセットアップ作業に入ります。
KVMについても再度お願いしておきますた。

make update
make -j 4 buildworld buildkernel

実行中。
-j 8 あたりでもよかったかな。

make installkernel
reboot
(どきどき)
mergemaster -p
make installworld

村井先生のアンコール番組はじまた＠教育テレビ

mergemaster -F
reboot
(どきどき)

S社の田中社長だ。

%uname -a
FreeBSD tiger3546.maido3.com 8.0-RC1 FreeBSD 8.0-RC1 #0: Thu Oct 1 14:16:24 UTC 2009
[email protected]:/home/obj/home/src/sys/GENERIC amd64

ここからは徐々に。

TVはSMTPしゃべってる。

昔、村井先生の本買ったなぁ

まだまっさらなので、こんな無茶を。

cd /usr/src
yes | make delete-old
yes | make delete-old-libs

で、カーネルシェイプアップへと。

まだ libc.so は 7 のままか。
offlaw.cgi のコンパイルは不要と。

# ls -l /lib/libc.*
-r--r--r-- 1 root wheel 1236336 Oct 1 14:24 /lib/libc.so.7

しかしこのままでいくのかな。

>>793
> 8.0-RC1
(ﾟ∀ﾟ) !!

村井先生がどうしたのかと思ったらホワイトボックスか。
NHKはもっとこういう番組やるべき。

番組ch(教育)
http://live23.2ch.net/liveetv/

8.0-RC1はmultithreadのreadが7.2よりも遅くなってるから(>>743-)まだ止めといた方が…

>>800
ふむ、、、。

でもいまさら 7 入れると、すぐにobsoleteになりそうだし。
ちなみにマルチスレッドの read は、
雪だるまシステム(worker MPM)以外には使っていないかも。

で、偉大なJon Postelさんの話か。
もう亡くなって11年か、、、。はやす。

>>801
マルチスレッドじゃなくマルチプロセスだから大丈夫だ、なんてことは無いように思いますがどうなんでしょうか。

番組おわた。

カーネルシェイプアップ中。
基本はデバイスはずしとか使わない機能はずし(NFSとか)。
細かいところが微妙に変わってるのね。

しかし最近はメモリどっさりで、
あらかたのパラメータはsysctl.confやloader.confで変えられるから、
この作業そろそろ省略してもいいかも。

>>802
ううむ、どうでしょうか。

もしもなんだか遅かったらまたその時に考える、
というのはどうでしょう。

ハードウェアは基本同じで設定も基本同じでいく予定なので、
前の状態との比較は容易かと。

少しでもメモリを有効利用するためにも省略しない方がいいようなないような。
割に合わない作業なら仕方がないのですけど。

%uname -a
FreeBSD tiger3546.maido3.com 8.0-RC1 FreeBSD 8.0-RC1 #0: Thu Oct 1 14:58:57 UTC 2009
[email protected]:/home/src/sys/amd64/compile/AMD64_ATIGER_80_NOFIREWIRE amd64

>>805
こんなかんじですた。
-avail memory = 8174493696 (7795 MB)
+avail memory = 8180256768 (7801 MB)

もっとけずればけずれるのかもですが。

一つ確認しておきたいことが
HDDは、10krpm？7200rpm？

>>807
7,200rpmのようです。(前のgimpoと同じ回転数)

ad10: 238475MB <Seagate ST3250310AS 4.AAA> at ata5-master SATA300
ad12: 238475MB <Seagate ST3250310AS 4.AAA> at ata6-master SATA300

仕事から解放されたら、gimpo鯖が死んでいたようで。
お疲れ様です。8.0-RC1ですか。

gjournal やら zfs やらの新たな機能は使わず、
単にまずは 8 系にするだけでいこう。あとは基本前と同じで。

>>804
問題が起きてから考えても特には問題ないとは思いますが、手間避けたいなら7.2のままの方が良いような…。

# それと前も言いましたがunixbenchは4.xでは無く5.x使った方が良いです>('A`)さん
# http://www.hermit.org/Linux/Benchmarking/

>>809
代替サーバのセットアップはいまのとこ、あんまり心配してないんですが、
データの吸出しがうまくいくかのほうを心配してます。

>>812
うーん、、HDDが駄目になっちゃったんですよね。
こればかりは、なんともいえませんね。
駄目だったら、記者さんの設定やり直しか。

HDDの破損だと痛いですね。>>813

あと、うぶんちゅとの比較ベンチが話題になってるみたいですが、
gcc のバージョンとかオプティマイズフラグとかの条件は、
どんなかんじなのかしら。

たしかKarmic alpha6だったら4.4.1だったかと＠gcc

>>814
復旧の見通しはどれくらいでしょうか？
明日の朝までとかメドは立ってますか？

>>814
FreeBSD 8はgcc-4.2.1とあります。最適化は不明。
Ubuntuはgcc-4.4.1です。最適化は-march=i486 -mtune=686だったかと。

ちょっとalpha6起動して確かめてみるみる

>>816
セットアップはたんたんと進めているので、
(今/usr/local の下作ってます)、寝るまでには終わるかと。

で、セットアップできたらDNS変更依頼かけて、
あとはKVM接続待ちかなと。

あ、AMD64(x86_64)ってありますね。
だとすれば最適化オプションの実質的な違いは無いかと。

でも今日はrootさんお仕事で日中何かあったら・・・。

確かめた。
>>818ですね。

>>819だたorz

ふむふむ。>>817 >>820

FreeBSD に付属の gcc は、4.2.1 から上がりそうもないですもんね、、、。
なんだか GPL3 のライセンスがいやだという話だと噂で聞きましたが、
違ったかも。

>>819
すると本格稼動は明日以降ですね。

airline 板が今だめだから、
コンパイルしてる間 engei 板でも ROM ろうと思ったら、
そこもだめだった、、、。(´･ω･｀)

仕方ない、ドイツ語版ハイジでも見るか。

>>824
本当かどうかは知りませんが、llvmのclangに移行するって話を聞きました。

>>827
ぐぐったらだいちくんの記事がひっかかりました。
BSDCan 2008で発表あったのね。

【レポート】GCCに匹敵するコンパイラ?! LLVM - BSDCan2008
http://journal.mycom.co.jp/articles/2008/06/03/bsdcan6/index.html

今後の流れは、

代替サーバセットアップ→rootさんが寝るまで？
起きてから旧サーバーからのデータ移行→あれっ？
更に補完鯖にHDD乗せ替えして代替サーバーに→ほっ

ってとこ？

>>829
1行目はたぶんそんなとこです。

2行目以降は、祈りましょう。

祈るしかありませんね。
gimpには+板ってWalkerだけでしたっけ？

横からですが、似たような業界で、似たようなトラブルを知ってる自分としては、
rootさんお疲れ様ですと言いたい

>>832
仕事でやってる人は大変ですね。

# 私も遠い昔はそんな仕事してますた、、、。

現役です。HDD故障は本当に泣けます。
言いたいことは一杯あるけど、ごにょごにょ。。

>>828
正直言ってllvmはまだ最適化がしょぼいです。
しかも大域プロファイリング技術(oprofileやperfなど)が発達してきているのでJITの手法は今後更に無意味化すると思います。

意味あったとしても経験的に分岐ミス無くして自動インライン化で一割高速化が限度でしょう。
既存の静的な技術であるgccの-fprofile-generate/-fprofile-useに比べ動的だと大域で最適化できるという利点はありますが、オーバーヘッドの事を考えるとかなりマイナスな気がします。

femnewsplus
moeplus
namazuplus
news5plus
owabiplus
scienceplus
ticketplus
wildplus

だったかな。>>831

dqnplus がここになかったら、
酒井法子被告の時に、もっとサーバダウン被害が広がっていたかと。

>>836
万が一ticketplusが駄目だった場合は、Walker+記者リストを私が復旧するとして。
あとは、あらいぎまちゃんに任せよう。そうしよう。任せた。

ニュース二軍+
http://gimpo.2ch.net/wildplus/
萌えニュース+
http://gimpo.2ch.net/moeplus/
ほのぼのnews+
http://gimpo.2ch.net/femnewsplus/
科学ニュース+
http://gimpo.2ch.net/scienceplus/
お詫び+
http://gimpo.2ch.net/owabiplus/
ニュース国際+
http://gimpo.2ch.net/news5plus/
地震速報
http://gimpo.2ch.net/namazuplus/
芸能音楽速報
http://gimpo.2ch.net/musicnews/
Walker+
http://gimpo.2ch.net/ticketplus/


>>831


キャップ設定ありなのはこんな感じかと

vfs.lookup_shared と、
vm.pmap.pg_ps_enabled はデフォルトで 1 になってるみたい。

/etc/sysctl.conf と /boot/loader.conf の該当行をコメントアウト。
で、リブート中。

>>824
私もどこかで、gccが4.2.1で止まってるのはGPL2な最終Ver.だからというのを見た事が。
gccに限らず、FreeBSD本体にはGPL3なコードは入れたくないっぽいという話ですね。
そこに、BSDライセンスなllvmがあるからそりゃいいね！ってのが今の流れだったと思います。
大地さんの記事で、llvmに関しては現状デグレッションもあるとかいう話なので
まだ当分の間FreeBSDはgcc 4.2.1で行くんじゃないかと思います。

>>839
Walker+は私。
地震速報はなまず★さん。
芸能音楽速報は赤翡翠★さん。
後はあらいぐま編集長の掌握範囲ですね。

こんな感じだったかな？

>>841
> FreeBSD本体にはGPL3なコードは入れたくないっぽいという話ですね。

そんなかんじみたいですね。

>>840
8以降はこれが標準になったということで、以下コメントアウト。

/etc/sysctl.conf
↓
#vfs.lookup_shared=1

/boot/loader.conf
↓
# enable "Superpages"
#vm.pmap.pg_ps_enabled=1

>>842
一応キャッポ設定権のあるお星様（板長）は
萌えニュース＋のオプーナ ★さん
国際ニュース＋のパキュンパキュン峰富士おρρρ ★さん
あと最近見かけないけど科学ニュース＋の外道 ★さん

復旧作業ご苦労さまです。
7月末に会社のDBサーバのUPSが逝って、Solarisのシステム関連スライスが
目茶苦茶になった時は死んだなぁ…データは外部ストレージだったから、
ほぼ無傷だったのが幸いだったけど。

>FreeBSD tiger3546.maido3.com 8.0-RC1 FreeBSD 8.0-RC1 #0: Thu Oct 1 14:16:24 UTC 2009

2chの運営さんってチャレンジャブルなんですね。
先月、自宅鯖のHDDがお逝きになって、やっと
xxx.hoge.net 7.2-RELEASE FreeBSD 7.2-RELEASE #0: Fri May 1 08:49:13 UTC 2009
に上げたばかり。8.0系は様子見中。

>>844
んじゃ、その人たちが復旧するのかな？
ニュース系は大変だろうなぁ。。

>>845
とりあえず RC になったんで、、、。
そんな私ですが、さすがに HEAD ブランチで試す勇気はないです。
その点では、8.0-BETA2 を実戦投入した maido3.com の中の人のほうが
もっとチャレンジャブルかと。

そういいながらも、その昔 5.3 の BETA 版を入れて試したことあります。
ex7 だったかな。

>>845
>Solarisのシステム関連スライスが目茶苦茶に
Solarisは良く知らんけども、ジャーナリングファイルシステムがあるなら電源断ぐらいで壊れないはずでは?

>>848
「人生には上り坂と下り坂と『まさか』がある」

これまでの人生で学んだことの一つです。

データが全部飛んでしまってるなら
設定し直し大変そう。

全員の分は把握してないですし。

>>839
昨日チェックしたときの記者数です。

スレ立てお手伝いさんの人数＠２ちゃんねる（抜粋）
http://gimpo.2ch.net/test/kisya.cgi
---------------------------
wildplus = 94
moeplus = 75
femnewsplus = 58
scienceplus = 46
owabiplus = 29
news5plus = 51
namazuplus = 1
musicnews = 7
ticketplus = 15

>>849
今調べた所、Solarisでは1TB未満のファイルシステムでは標準でジャーナリングファイルシステム(UFS ロギング)では無いものが作られるようです(!)
これはひどい

>>850
Walker+は記録に残してるんで、復旧は可能です。
それでも時間は、そこそこかかると思いますけど（汗

>>848
それが、何故かシステム関連のスライスだけ logging が無効に設定され
てたんですよ。それで fsck かけたらえらいことに…。
立ち上げた SIer の偉いさん呼びつけて小一時間説教しましたけど。

私が自分で設定したもの以外は知らないんですよね。

こういうのもバックアップ取っておけばよかったのかな。
（取ろうと思えば取れますね。確かに）

>>847
この辺かなあ

【Project peko】2ch特化型サーバ・ロケーション構築作戦 Part15
http://qb5.2ch.net/test/read.cgi/operate/1093068260/

キャップのバックアップって各自でやってるのか・・・

キャップのバックアップは登録者個人の判断ですよ。
私は仕事柄、＊機械は絶対に壊れるもの＊と思ってますから
記録を残していただけです。
癖みたいなものです。

qb5のHDDが死んだ場合も大変そうですが。。
まぁ、誰かがバックアップしてるでしょ。

>>854
>logging が無効に設定され
あーやっぱり。
ここら辺、Linuxが一番楽ですね。ext3 (標準)かreiserfs使ってれば問題無いという。

あ、最近だとext4になるのかな。まだ使ったこと無いけど。

>>856
もう5年も前ですか。
確かPIE訪問2回目ですね。

そういえば、最近ずっとPIEに行ってないですね。

さて、器できた。

DNS更新依頼してきます。

以下のDNS変更を依頼します。

・バーチャルホスト収容サーバの変更

(現状)
+gimpo.2ch.net:207.29.247.145:300

(変更後)
+gimpo.2ch.net:207.29.225.195:300

>>863
依頼済。

rootたん乙です

お疲れ様です。
中身の方は、明日以降かな。

; <<>> DiG 9.4.3-P2 <<>> @ns1.maido3.com gimpo.2ch.net
; (1 server found)
;; global options: printcmd
;; Got answer:
;; ->>HEADER<<- opcode: QUERY, status: NOERROR, id: 24841
;; flags: qr aa rd; QUERY: 1, ANSWER: 1, AUTHORITY: 2, ADDITIONAL: 2
;; WARNING: recursion requested but not available

;; QUESTION SECTION:
;gimpo.2ch.net. IN A

;; ANSWER SECTION:
gimpo.2ch.net. 300 IN A 207.29.225.195

変わりましたね。root さん乙です。

ttp://gimpo.2ch.net/
切り替わりましたね。

見えた＠建設予定地

予定地が見えるお。乙んこ。

乙乙

乙

DNS変更完了のお知らせが来ました。
当然ですが、今は建設予定地しかありません。

KVM接続を確認でき次第、次の段階へと。

gimpo.2ch.net建設予定地見えました。深夜までお疲れ様です(｀･ω･´)ゞﾋﾞｼｯ!!

>>873
このまま続行ですか？

さて、おふろ入ってきます。
その間にKVMが来たら、、、。

>>875
かみのみそしる。

あ、そうそう。重要なもの忘れてた。

tiger3546.maido3.comの転送量グラフ
http://traffic.maido3.com/Cwwk/1cMG/JYBC/

うへぇ。
久しぶりに寝たら負け組みの展開ですか。

>>879
いや、時が来れば寝ますよ。

「体が第一、壊したら何もできない」

これも >>849 同様、これまでの人生で以下略。

>>879
そうですね。
んじゃ、寝よう。
久しぶりの寝床だし。
rootさんも無茶をしないように。

>>881
> 久しぶりの寝床

うむむ、ごむりなさらず。

自律神経失調症の恐怖

アルツハイマーもね
http://slashdot.jp/science/article.pl?sid=09/09/29/0322243

尿管結石じゃね？

FOX ★尿管結石で療養中
http://tsushima.2ch.net/test/read.cgi/news/1254394426/

新しいIPアドレスをstatsに登録した。

予告なく寝落ちする予定。

さいごにメールチェックしたら、
中の人からKVMつながったというメールが来てますた。

しかし、サーバはハングしている模様。
リブート依頼中。

コンソールつかめた。
シングルユーザで上がった。

データはとりあえずあるみたい。

なんというタイミングで睡眠妨害メールが来てるんだ
無理してるなら寝なさい、rootたん

rootたん、無理しないでね
｜つc■~

ネットワークも無事起きたようだ。

データ転送が完了するまで、
新しい gimpo の httpd 落とします。

>>889
どうせしばらくかかるので、データ転送流して寝ようかなと。

>>891
もう、横になったほうがいいかと

寝ちゃ駄目

おお、最悪の事態は回避の予感

>>891
乙乙
ほんと何事も体が資本。おやすみなさい

/ /usr /var の無事を確認。

/home を read only で mount できるのを確認。
こういう時は /home は fsck せず、手で mount -r すること。

あとは、dump でファイル転送ということで。
70GBytes もあるから、そうすぐには終わらないな。
まずは固めたままで新gimpoに流し込もう。

dump じゃなくて tar でいくか。
いずれにしても流したらいったん寝るか。

お体お大事に…

えー
dumpの方が良いような。dumpのままマウントすりゃ良いんだし

データ転送開始。
ディスクに書いてる新gimpo側のddをrtprioで活入れした。特急モード。

>>898
dump って選択してとれましたっけ。
(最近のはとれたりするかも。眠気来てちょっとあぶないのでベタなコマンドで)

# ここ ports とか src とか必要ないやつがあるんですよね、、、。

でもdumpでとっとくと便利ですよね。
特に restore i の使い勝手を覚えると、なかなか手放せません。

ということで、あとはtiger3515=旧gimpoが
とってるうちにカーネルパニックとかを起こさないことを祈ろう。

あとの作業は起床後ということで、
いったんおやすみなさい。

rootたん乙です
休めるとこは休んでね

rootたん乙でした。
おやすみなさい。

>>901
ご苦労さま
ｵﾔｽ〜

ぐっど・ないと

>>901
乙です

さいごにmaido3.comの中のひとと、自分のメモのために、
KVMでやったことをまとめておこう。

たまにやることではあるけど。

＜シングルユーザ作業の基本＞

1) ブート画面でspaceキー入力
2) カウントダウンが止まる
3) 4を押してシングルユーザモードへ
4) /bin/shがどうの、の入力でEnter
5) # が出るので、IPアドレス直うちでネットワーク設定
5.1) cat /etc/hosts ←これでIPアドレスがわかる
5.2) ifconfig em0 xxx.xxx.xxx.xxx ←IPアドレス手で入れる
5.3) 動けばUPになった旨システムメッセージが出る
5.4) route add -net default xxx.xxx.xxx.2 ←デフォルトルート設定
6) 外の別のサーバから xxx.xxx.xxx.xxx を ping して確認

ここまでできればネットワークはOK

(続き)

(続く)
ここからは運がよければ。

fsckする。
7) fsck /
8) fsck /usr
9) fsck /var

-y つけるのは危険なので、手で確認しながらやること。

うまくいけば mount する。
10) mount /usr
11) mount /var

これでうまくいけば、通常のコマンドが使えるようになる。

もし7から10がうまくいかなかったら、
がんばって / だけで作業するか、CD-ROM つけてそっちからブートして復旧作業する。

dumpってああ、FreeBSDだとそういうコマンドがあるのか。勉強不足でした。
Linuxでいうならdd if=/dev/sda | gzip -cなこと想像してました。
tarだとファイルシステムたどるので避けた方が良いです。

まぁいいや、上手くいくことを願って
乙

>>909
> tarだとファイルシステムたどるので避けた方が良いです。

ですね。
もししくったら、こんどはdumpでやります。

あああああrootさんもう寝よう
働きすぎるよ体に障るよおおお
私と一緒に寝ようよおおおおお

>>908 の続き

/home が読めるか確認する。

※安易に fsck しないこと。

mount -r /home

これで mount できればもうけもの。
少なくともスーパーブロックはこわれていない。

あとは dump や tar で普通に読み出してみる。 ←今回の「今ここ」

書き込む場所は大抵ローカルにはないので、
こんなかんじで別のサーバに送る。

tar czf - ./ch2xxxx | ssh yyy.yyy.yyy.yyy -l admin dd of=ch2xxxx.tar.gz
dump 0af - /home | ssh yyy.yyy.yyy.yyy -l admin dd of=ch2xxxx.dump

CPUや冷却系がこわれてないなら、nice を使う手もある。

nice -20 tar czf - ./ch2xxxx | ssh yyy.yyy.yyy.yyy -l admin dd of=ch2xxxx.tar.gz
nice -20 dump 0af - /home | ssh yyy.yyy.yyy.yyy -l admin dd of=ch2xxxx.dump

ネットワークボトルネックだったら、dump の際に | gzip -f - とかをかます手もある。

以上は /etc/fstab がこわれていない場合に有効。
ほかにも色々注意点あるけど、このへんは現場で痛い目にあって覚えるということでｗ

ということで取り急ぎ。

>>911
こんどこそおやすみなさい。
あとはお祈り。

あ、ファイル書くほうで動く dd を rtprio 31 -(pid) などとして活入れしておくといいです。>>912

FreeBSDでループバックデバイスを使うにはvnconfigを使うと。細かな所の違いが厄介ですね。

良い悪い関係無しに、このスレが伸びてると嬉しいのは俺だけじゃないはず。。
むむさん遅くまで乙。

嬉しいよりも普通に心配
くれぐれも無茶はしないでね

お疲れさまです。

バックアップか、 自身で作業の足跡とってるおかげで、
BBQ が一部消失したときに私の作業した分の登録を復旧したことが。

SETTING.TXTとかが破損したときのバックアップ(宣伝ｗ)。

http://suamania.70.kg/ch2backup/

バックアップは無事完走してました。
これから解凍 @ 新しいほうをしかけます。

日中の作業だけでいいですよ。無理しないで。

解凍開始。(rtprio で活入れ完了)

どうせすごく時間かかるので、
これから身支度しておうち出ます。
次の作業は次、オンラインになった後で。

>>921
ここまで来たらあわてる必要ないんで、
あとはじっくりやるです。

>>923
ok乙です

>>923
乙
っ特上馬刺

この調子なら…今日中には復旧できるかな？

さて。
解凍は無事完走しますた。

微調整して、サーバの最終リブートテストいきます。
無事立ち上がったら読めるようになりますが、
bbs.cgi はまだ止めてます。

で、IPアドレス変わったので、
この間に F22 の調整してきます。

あがったかな。

bbs.cgi はまだ止めてます。

>>928
+系板と資料室okでしたー

>>926
早いぞｗ乙乙

ジンギスカンなのは dcamera と sake か。
板復帰した。

各所点検して問題なさそうなら、bbs.cgi 動かします。

bbs.cgi 動かした。
観察中。

科学+書き込みok

概ね大丈夫そうかな。

なにぶん100枚以上あるので、
板復帰が必要な場合、適宜通常ルートで依頼お願いします。
ライブな板については、subject.txt が 0 バイトになってないのだけは
一応確認しておきますた。

乙

>>934
ヅカシキokです
お疲れ様でした 旦

F22も無事かかったみたいですね。
http://gimpo.2ch.net/_service/20091002.txt

これで今夜のピークを乗り切れば、
障害復旧ということで。

乙でした

長時間の作業乙でした

>>937
乙です！

お疲れ様でした〜

｡･ﾟ･(ﾉД`)･ﾟ･｡ﾊﾞｶﾇ書き込めたよ〜！
ﾎﾝﾄにﾎﾝﾄに乙でした！

>>937
長丁場の作業本当に乙でした

乙です！
ありがとうございます。ほんとにお疲れ様でした！

>>937
(｡･ｘ･)っ旦おつかれさまです〜
ありがとうございます。

>>937
乙

rootさん乙でした！

>>937
本当にお疲れ様でした〜

rootさんお疲れ様でした！

このスレ読んでいると
俺には鯖缶は無理だと思ったわｗ

>>937
乙でございます！

おお、解決したっぽいのかな。
お疲れさまでした。

これでよくわかった
板を詰め込みすぎって事が

せめて二つに分けた方が良いかもねえ

>>937
お疲れさまでした！
ホントにありがとうございました！

コストの削減とリスクの分散か、落とし所が難しいねぇ。

サーバ1台に最大100枚まで

乙です。
五輪開催地決定が深夜ですな。
雪だるまとニュース系が無事でありますように（-人-）

tsushima と yutori7 が落ちたら、ひと騒ぎどころじゃなさそうだなあ

お疲れ様です。
本当にありがとう。

お疲れ様でした！！

rootさん、お疲れ様でした(｀・ω・´)ゞﾋﾞｼｯ!!

rootたん乙乙

おお、復旧していました
ルートさんおつでありますゝ

お疲れさまでしたー(^_^;)

>>937
乙

>>964
明日あたりまでtiger3546が問題なく動いたら、
tiger3515はいったん退役→必要に応じて点検修理ということで問題ないと思います。

取りあえず乙です。ただ昭和特撮板のスレッド一覧の名前（ＩＥの履歴欄に
表示される）がなくなってるようなんですが？

>>967
URLくださいです。

しょーもない、演劇・舞台役者板
乙です。ありがとうございました。

昭和特撮
http://gimpo.2ch.net/rsfx/

>>970
どもです。
でも特に異常ないような。

タイミング的に、板復帰と被ったんじゃないかな〜。

かもしれないね。

>>968
これですね
http://gimpo.2ch.net/rsfx/subback.html

> 昭和特撮＠2ch掲示板＠スレッド一覧

ちゃんと出てるやん

>>971-972ということで解決。

スレチでrootさんに質問が。
バーボンにずっと焼かれたままで居るこのIP達どうにかなります？
BBON.live23f4.7500 焼 202.219.104.30 (202.219.104.30 )
58 BBON.live23f4.797 焼 219.94.180.109 (219.94.180.109 )
59 BBON.set.1052 焼 125.53.25.12 (s301.xrea.com )

どうにか、というのは。>>977

# これからちとオフライン気味。

>>977
Booされてるっぽい。逆引き不可だからかな。
一番下のxreaはレンタル鯖だから解除は無理だと思う。

>>978
一番上のがドワンゴみたいで質雑で聞いたらクローラじゃないかと言われて、
live鯖だとたしかrootさん触れたと思うので除外等の対策ができるかと思いまして。

1週間以上バーボンで2時間経ってはまた焼かれてを繰り返してるようなので。

>>980
一番目のやつは、よくわからないので１号さんに聞いてみます。
二番目と三番目は、例外処理する理由ないような。

58 BBON.live23f4.797 焼 219.94.180.109 (219.94.180.109 )
Network Information: [ネットワーク情報]
a. [IPネットワークアドレス] 219.94.180.0/24
b. [ネットワーク名] SAKURA-NET
f. [組織名] さくらインターネット株式会社
g. [Organization] SAKURA Internet Inc.

さくらか・・・

鳥合図るーとたんおつです。

>>981
宜しくお願いします。

10/6に富士山行こうよとか
平日でこれあるのに帰って来れなかったらどうするんだｗ

誤爆しました
ごめんなさい

誰か次よろ

>>977
BBON.live23f4.7500 焼 202.219.104.30 (202.219.104.30 )
f4に直接ダイレクトでこのアクセス数はさすがに行儀悪すぎやしないか、ドワンゴｗ

>>981
あいさー。あいさー。

こんにちわひろゆき氏
キャップクレーとか言ってみるｗｗｗ

じゃぁ俺にも

聞いても良く分からない件

>>989
実況を新鯖作って移動しようぜ。

ごめんひろゆき氏、
間違ってBBQ掛けてもうた。

>>989
次スレよろ

相変わらず何が言いたいのかわからないひろゆきｗ



jimﾀﾝ大丈夫かな。。

ひろゆきってこのスレみてんだ。

>>989
了解です。
今日寝るまでに作業しておきます。

live23f4 を直接ではなく、live23 でクロールしてもらえるとうれしいと、
担当者の方にお伝えいただけると助かりますです。

それで分かるのがすげー

デジャブ。

このスレッドは１０００を超えました。
もう書けないので、新しいスレッドを立ててくださいです。。。