次期主力bananaサーバ建造委員会　その４

１プロセス当たりのメモリ使用量が一体いくつになってんだよ
topコマンドさらせよ
メモリリークだろ

市況1、開始1分間だけナス＋123.75％の誤表示で大盛り上がりだた

実験機だろ、acctでトレースしてみる？
それともtuscなどと、知ったかしてみる。w

昨日までの様子だと運がよければ今晩もう一度鯖落ちする機会あるかも。
一分あたりのPOST数が350越えたあたりのメモリ状況を追えば
私の予測が大きく外れてなければ、原因となる動きがあると思う。
鯖が生きてるなら再起動する前の swapinfo の内容も取れてれば
より追求しやすかったかも。余裕があればチェックしてみて下さい

おいおい道産子ラーメンども逃亡かよ
神の言葉をありがたく拝借しろよ

coreとかcrash dumpとかないのかな、このOSは。

ま、HPじゃなくてFreeBSDだし。

そぉです。私はHPUX使いです。
どおやって調べるよ。特にハードがらみなんて。
今回どうやって、電源があやしいってことになったんだ？
HW monitorみたいなのがはいっていたのか？

60 マァヴ ◆jxAYUMI09s 2007/02/10(土) 23:34:20 ID:QlXeo7iE0 BE:?-DIA(33347)
これは極秘情報なので、他ではしゃべっちゃだめです(^_^;)
・banana290は昨年Jimが実験用に導入していじり倒していたサーバ
・その後退役していたのを借りて、次期bananaの実験機として採用したというF-18みたいな経緯のサーバ
・当時の実験の結果実は・・・・

66 マァヴ ◆jxAYUMI09s 2007/02/10(土) 23:35:18 ID:QlXeo7iE0 BE:?-DIA(33347)
電源容量が足りないという記録が残っていた(^_^;)のだった・・・・ぉぃ

92 マァヴ ◆jxAYUMI09s 2007/02/10(土) 23:38:26 ID:QlXeo7iE0 BE:?-DIA(33347)
つことで電源を強化しないとだめかも(^_^;)
それで直るという保障もないけど・・・・

//この辺りかなー

FreeBSD の core は kernel panic なり、segmentation fault なりで吐きますけど
今回のような、電力不足によるハードウェア異常停止や、httpd サービス停止では
残ってないと思います。実行コードの中身の問題ではないのでなおさらかと

412 マァヴ ◆jxAYUMI09s 2007/02/11(日) 08:39:15 ID:VV2ADEWy0 BE:?-DIA(33347)
tigerの電源ユニットは500Wだけど、全長が長いため肉丸君には入らないこと判明(^_^;)
肉丸君の電源は・・・・なんと150Wと判明(^_^;)これはいくらなんでも少ないと思う

さて、では・・・・何ワットが適正なんだろうか？(^_^;)

//追加ー

今回の鯖落ちの原因のひとつとして httpd に apache 使ってるなら MaxClient の設定値落とすことでも対処できるかも。
適切な値は、プロセス計測しないのであれば鯖落ちを経験しながら調整する必要ありますけど。
あたりが私がこのスレを読んで推測した鯖落ち対処関連のノウハウです

>>697
きっかけはメモリ増設

メモリを増設したところ不安定になりだしたので電源を調べてみたら
150Wという貧弱な電源であることが判明

んで、電源を交換しようという話になった

しかし、２ちゃんは多士済々だねえ・・・

>>702
それが原因でどっか焦げてるんじゃないの？
基板とかHDとか
と素人が言ってみる

よく頑張った
http://stats.2ch.net/karasu2.cgi?yesterday

>>485
マァヴやっぱ、技術者やな。
なんだかんが言って、わくわくしとる。。

これで安定してくれればねえ・・・

でやっぱメモリ関係なのかな？
まあ、電源も関係あったんだろうけど・・・

H/Wってよりも、メモリ（というかプロセス多過ぎ）っていう話だとおも。
プロセス数の推移とメモリ使用量およびswapの推移を記録しておくと楽しかろうて
で、本格的には folk とかの syscall trace というお約束の順番でしょうね。

無茶な設定から平穏へと

BBS_MAX_MENU_THREAD=100 (200 -> 100)

#!/usr/local/bin/speedy -- -M32 -b1048576 -t660 -T/md/tmp/speedy/t (-M10 -> -M32)

kouri をジンギスカン化

samba = 5
実は samba=15 から 5 に変更したとたんに落ちたので
リブート後、すぐに 15 にもどした

現在 saborinはあり
このままいけばいいなぁ

あしたの午後まで落ちなかったら saborin=OFFに挑戦 (またsambaとの兼ね合いもあるかな)

スワップはしないように使っています。


last pid: 35204; load averages: 2.86, 3.05, 3.40 up 0+01:33:30 07:43:21
15 processes: 1 running, 13 sleeping, 1 zombie
CPU states: 37.6% user, 0.0% nice, 10.2% system, 3.4% interrupt, 48.9% idle
Mem: 316M Active, 840M Inact, 196M Wired, 820K Cache, 112M Buf, 634M Free
Swap: 2048M Total, 2048M Free

あぁ　あしたこそは read.cgi なんとかしよう
と心に決めてみた

寝てます？

おつ耐久レースになったらいいな

寝てますよん

この界隈が限界なんだろなぁ
あとニュー速くらいは入るかもだけど
安定を目指します。

そして２号機へと実験の舞台は移ります。
これはあんまり見せ場はない予定、無理はしない。

次の３号機で vip にがんばってもらおう !!
最速1,000の記録って何秒でしたっけ?

http://members.at.infoseek.co.jp/maruheso/guinness/

●1000レス到達までの時間が最も短いスレ（秒数表示導入後）
　1位　49秒
　　( ・д・）ﾏﾁｭｲ・・・
　　http://ex10.2ch.net/test/read.cgi/news4vip/1117035000/

ここだけ２月１５日
http://ex17.2ch.net/test/read.cgi/news4vip/1171376406/

8 名前：愛のVIP戦士[] 投稿日：2007/02/15(水) 00:02:17.37 ID:eDkhJXBr0
おい本当に15日じゃねーか

>>713
耐久する前に、ジャンクの詰め合わせ鯖だから落ちてるんでないか？

やけくそで言う
本物の冷凍庫に鯖ぶちこめ

調子いいじゃん。

んー残念、６０万投稿を目指して欲しかったｗ

あれ？落ちてたの？
実況板にいたからなあ。

>>717
思うに、現在の限界はハードじゃなくてソフト側でしょう。
OS apache BBS一式

ここまでくると犯人探しはめんどくさいので逃げ腰。
OSもぞくぞく新しくなるだろうし、BBS側も都度修正されるだろうし
時間かけますー、

レッドゾーンぶんまわしの実験はおしまいー

今日は峠は超えたようですね。また明日の夜に原因特定を期待しましょう。
以下少し一般人向けに説明

>>710
色々な参考になる情報を得ましたので少し状況を把握しました。

負荷グラフのパラメータから0:10前後に峠の Load avg. 5.63 POST 356 という
ピークを記録していましたが、この瞬間のデータがあればもう少しよかったかもです。

SWAPが少しでも発生⇒ドライブの負荷増大スパイラル開始(消費電力UP)⇒電力不足であぼ〜ん
が昨日までの鯖落ちで一番ありそうなシナリオですが、今日のは
SWAPが少しでも発生⇒ドライブの負荷増大スパイラル開始(消費電力UP)⇒電力不足にはならなかったけど httpd は例外エラーで消滅
という状況になったのかもしれません。
逆に今日二度目の鯖落ちがないのは、SWAPを使うほどメモリを使い切らなかったため
というシナリオだったのかもしれません。

この仮定を立証したいのであれば、メモリのアクティブリソースを使うダミープログラムを
立てて運用すれば一目瞭然かと。

逆にこれが原因でなければ懸念事項がひとつ減るので次の段階に進められます。
このあたりが参考になるのであれば、これを元に原因特定と対処改善を頑張って下さい。

はーい
がんばりますー

解説ありがとうございます＾＾

>>710
→1 zombie
apacheさんの残骸かも？

>>725
でたり引っ込んだりなんですよね

read.cgiもdsoだからapacheさんの一部と考えていいのかな?
そのへんにはbugたくさんあるでしょねー

>>726
→でたり引っ込んだりなんですよね
それならちょうどプロセスが死ぬ間際ってところかなぁ＠その時にtopさんが拾うみたいだから。

$ ps auxww
の結果は貼り付けられないですよね？（苦笑）

ch2ex21@banana290:~/public_html/test$ ps auxww
USER PID %CPU %MEM VSZ RSS TT STAT STARTED TIME COMMAND
ch2ex21 47662 5.8 0.9 19108 18656 ?? S 8:16AM 0:12.57 /usr/local/bin/speedy_backend -- -M32 -b1048576 -t660 -T/md/tmp/speedy/t bbs.cgi
ch2ex21 47294 3.7 0.9 19664 19188 ?? S 8:15AM 0:15.27 /usr/local/bin/speedy_backend -- -M32 -b1048576 -t660 -T/md/tmp/speedy/t bbs.cgi
ch2ex21 47664 2.1 0.9 18280 17740 ?? S 8:16AM 0:10.25 /usr/local/bin/speedy_backend -- -M32 -b1048576 -t660 -T/md/tmp/speedy/t bbs.cgi
ch2ex21 45292 1.0 0.8 17784 17260 ?? S 8:09AM 0:06.46 /usr/local/bin/speedy_backend -- -M32 -b1048576 -t660 -T/md/tmp/speedy/t bbs.cgi
ch2ex21 46695 0.6 0.9 19716 19184 ?? S 8:13AM 0:17.59 /usr/local/bin/speedy_backend -- -M32 -b1048576 -t660 -T/md/tmp/speedy/t bbs.cgi
ch2ex21 48086 0.5 0.8 17968 17480 ?? S 8:17AM 0:05.16 /usr/local/bin/speedy_backend -- -M32 -b1048576 -t660 -T/md/tmp/speedy/t bbs.cgi
ch2ex21 839 0.0 0.2 6252 3312 ?? S 6:13AM 0:00.55 sshd: ch2ex21@ttyp0 (sshd)
ch2ex21 24396 0.0 0.1 2704 2200 ?? Is 7:16AM 0:00.05 /usr/local/bin/speedy_backend -- -M32 -b1048576 -t660 -T/md/tmp/speedy/t bbs.cgi
ch2ex21 48823 0.0 0.1 2704 2212 ?? I 8:19AM 0:00.00 /usr/local/bin/speedy_backend -- -M32 -b1048576 -t660 -T/md/tmp/speedy/t bbs.cgi
ch2ex21 49641 0.0 0.1 2704 2212 ?? I 8:22AM 0:00.00 /usr/local/bin/speedy_backend -- -M32 -b1048576 -t660 -T/md/tmp/speedy/t bbs.cgi
ch2ex21 49749 0.0 0.0 0 0 ?? Z 8:22AM 0:00.00 <defunct>
ch2ex21 49756 0.0 0.0 0 0 ?? Z 8:22AM 0:00.00 <defunct>
ch2ex21 840 0.0 0.1 3220 2052 p0 Ss 6:13AM 0:00.02 -bash (bash)
ch2ex21 49758 0.0 0.0 1428 908 p0 R+ 8:22AM 0:00.00 ps auxww

わー♪

長生きしているやつほどメモリを食っているような♪

-t660 をもっと短くすると良いのかな？＠11分

→ch2ex21 24396 0.0 0.1 2704 2200 ?? Is 7:16AM 0:00.05
もしかしてなぁんにもしないでサボっている？

どですかねぇ
なんで -t660 にしたんでしたっけ?

長く常駐すると暴走しちゃうとかでしたっけ、

>>714
最速でログ検索したけど、古い

254 名前：外野ｧｧﾝ[sage] 投稿日：2005/07/07(木) 22:23:24 ID:oqiBgJKE0
vipの最速1000記録ってどれくらいだっけ？

255 名前：動け動けウゴウゴ２ちゃんねる[sage] 投稿日：2005/07/07(木) 22:23:43 ID:K0u2yc190
49s >>254

2006年はチャレンジした形跡あるけど記録がわからん

>>732
通常では49秒でおｋ
雪だるま実験場では4秒が出たけど、これは別の話だろう

２号機の見せ場　→　何板入れるのかｗ

最近21鯖の住人になったんですが、ここにきて落ちてる意味がわかりました
中の人、633氏、ｶﾞﾝｶﾞってくださいな。いい物を期待してます。ﾏﾀｰﾘ待ちますよ

ｽﾚ汚しｽﾏｿ

>>722
スワップ用というのか一次キャッシュ用と言うのか分からんが…
一次的にデータ置く場所としてhd足してもダメってこと？

書き込みより読み込みの方がもたつくのかな？


素人考えだと
板をもっと分けて、負担かけそうなの分散させて、全体的にバランスとるんじゃダメなんかな？と思うんだが…

マァヴって、
東京と札幌を飛行機で何度も往復してるのな。

ＺＥＲＯって、お金あるんだな。。

一晩の内に物凄く進展してますね。。
後は安定すれば、次はRAID1の実証試験をするのかなぁ。。

それと、ex21.2ch.netのリブート依頼の扱いどうしますかね？
放置→Ver1.0対応→Ver2.0対応もＯＫと経過してますが。。

おもいっきし寝てた。。
ってか昨日のex21のPV数1255万かよっ

>>605
休日は、平日働いている人も昼間からアクセスできるようになるので、
その分昼間のアクセス数が上がるんですよ。
なので、平日とは違ってグラフが平らになる、、と。
これは大体どこのサーバでも見られる現象だったと思います。

そういや、ex20の時って、平日はむしろ15:00あたりが1日のピークだったのに、
今のex21だと平らになるくらいの影響しかないように見えてしまう、、のか？