【uma作戦】2ch特化型サーバ構築作戦 Part3

このエントリーをはてなブックマークに追加
796動け動けウゴウゴ2ちゃんねる
えっと、bbs.cgiは管理コストと負荷のバランスを考えると
mod_perl化がベストな選択だと思います。
bbs.cgiとread.cgi/r.i(p.iも?)以外の他のcgiは
呼び出し頻度がずっと少ないと思われるので現行でも充分でしょう。

あと、apacheのmpmをマルチスレッド対応のものに変えるのはどうでしょう?
workerかperchildにすれば1プロセスで複数のリクエストをこなすので
apache自体のメモリ(アドレス空間)使用量は減らせると思います。

で、read.cgi/r.iなんですが、私の手元に
・公開されているread.cgiを元に(変更部分とr.iの動作は推測で)
・.datの中身と中間加工したものをキャッシュして同一プロセスなら再利用
・その他いくつか機能追加
して、apache2用のモジュールを作ってみたものがあるのですが、
もし、read.cgiの時のように共同開発という形がとれるのであれば
叩き台として提供できるかな、とも考えているのですがいかかでしょう?
trackback対応はしてませんが、現状でも組み込んでLoadModule+SetHandlerするだけで
現行のread.cgi/r.iに近い動作をしてくれると思います。
797root ★:04/01/08 00:52 ID:???
news8は設定変更完了しました。
こんどは、ちゃんと増えたみたい。

(news6)
(kgdb) print pv_entry_max
$1 = 2166663

(news8)
(kgdb) print pv_entry_max
$1 = 8933351
798動け動けウゴウゴ2ちゃんねる:04/01/08 00:54 ID:zlq+QWxV
>>796
開発系の話はこちらですー

bbs.cgi再開発プロジェクト2
http://qb3.2ch.net/test/read.cgi/operate/1069144193/
799root ★:04/01/08 01:10 ID:???
>>796
モジュールのたたき台ですか。すばらしいです。
今のものとのマージとか、どうしましょう。>仕事人さん、関係者

で、開発系といういみでは微妙すね。ちょうど、境目かも。
もしほんとにモジュール化が軌道に乗るなら、bbs.cgiとは別スレがいいような気も少し。
800root ★:04/01/08 01:12 ID:???
で、今の、
%httpd -V | grep MPM
-D APACHE_MPM_DIR="server/mpm/prefork"

を、server/mpm/workerかserver/mpm/perchildに変えるということすね。
パフォーマンス的にはpreforkも含めて、どれがいいのかしら。

801動け動けウゴウゴ2ちゃんねる:04/01/08 05:52 ID:vodURly/
えーと。再確認
・apacheのmoduleはstaticビルドのほうが数%ほど高速
・FreeBSD4.9Rのapache2はportsからインストールしている? その場合のWITH_MPMとかWITH_THREADSとかは?
802動け動けウゴウゴ2ちゃんねる:04/01/08 05:59 ID:vodURly/
あとNMBCLUSTERS関係は
http://silverwraith.com/papers/freebsd-tuning.php
とか
803root ★:04/01/08 14:11 ID:???
>>801
デフォルトのportsです。WITH_SUEXEC=yes SUEXEC_DOCROOT=/homeだけ。
だから、Apacheはまだチューニングの余地がかなりあるはず。

ということで、WITH_MPMとかWITH_THREADSとかは、まだ開拓の余地ありです。
でなきゃ、今の倍はいけるとか軽々しくいわんです。

>>802
これはかなり参考になりそうすね。
804root ★:04/01/08 14:13 ID:???
あと、Apacheをkqueue対応にするというのはどうなんでしょ。と俺様メモ。(>>172)
805仕事人 ★:04/01/08 14:26 ID:???
現在どこに一番お金がかかりつつあるかというと、
回線使用料ではなく毎月のサーバの維持費です。

つまり 毎月 $300.00/台 とかという維持費がかかっていて
これがほとんどを占める状況になりつつあります。

簡単にいえば台数は少なければ少ないほうがいい。
サーバ買うのは一回こっきりのイニシャルコストです。

今後の予想としては、
2002年3月から始まったオイスター作戦の枠組みが
現状に照らし合わせてみてだんだんいびつになってきている。
近々、その枠組み(支出の方)を変更しなきゃ ってとこです。
管理人へもその状況は説明してあります。
春か、夏か、、、そのへんだと思いますー。
806● ◆HETAREzfq. :04/01/08 16:04 ID:XexGBBdh
>>805
ラック代にもメスを入れるのですか。

ところで、root権がない既存の鯖に後付けでroot権を付けるとすればいくらかかるんですか?
もし安い値段でそれが出来るんなら新oysterを全部uma化して耐性うpを計って台数減らしに着手したらどうでしょう?
(そうすれば新鯖導入なしで非oyster鯖を全部退役させられるかも)

仮にそれをやるとして、玉突き式に次々とやるとすれば空の臨時ハードが1台必要になるかもですが。
(news8とかの余裕のある?uma鯖に臨時移転とか)
807仕事人 ★:04/01/08 16:08 ID:???
古いサーバは退役の方向で、
なぜなら、経年疲労がたまっているから
故障発生率が上がる。

とくに HD & PowerSuply 、

808動け動けウゴウゴ2ちゃんねる:04/01/08 16:20 ID:aFsZTOdX
サーバを増設しなければいいのさ。
どこに割り当てるかを考えるのも面倒だしさ。
日常的に過負荷で落ちるようになるまで放置で。
809● ◆HETAREzfq. :04/01/08 16:35 ID:XexGBBdh
>>807
oyster14以降の鯖は古くても姿形はuma鯖とそっくりなのになんかもったいないなぁ。
rootなし新oysterは20台ぐらいあるからこれの処理能力が2倍になれば、と思ったんだけど。
810仕事人 ★:04/01/08 16:39 ID:???
そですね、

そうなんだけど、、、、


それを誰がやるのかと、
そういえばまだsportsの移転終わっていなかった。。。
その置き換えを全部やるのに二年くらいかかりそう
811● ◆HETAREzfq. :04/01/08 16:51 ID:XexGBBdh
>>810
移転ラッシュでおつかれのようで、、、

とりあえずあまりお金がかからないようでしたら新鯖導入がない月限定で
ちょっとづつでも、、(新しい新oysterから順番に、とか)
812● ◆HETAREzfq. :04/01/08 20:12 ID:XexGBBdh
20台全部なんてどだい無理でしょうからちょっと考えてみました。

・半年、一年等期限を区切ってroot化をやる
(一年も経てばの次の鯖を考える頃でしょうし)

・新oysterを2つ持っていて旧oyster等の古い鯖もある板系統の鯖をroot化する
(hobby系とsports系?能力2倍で旧oyster鯖廃止出来る!?)

・live系opteron鯖移行時にdatを保存庫送りにしてroot化をし、おさがりをどっかに割り当てる

813● ◆HETAREzfq. :04/01/08 20:14 ID:XexGBBdh
>>812
訂正
×(一年も経てばの次の鯖を考える頃でしょうし)
○(一年も経てば現在の次期鯖であるopteron鯖の次の鯖を考える頃でしょうし)
814桶屋:04/01/08 21:57 ID:pWZgWxya
退役の話が出てきたんですねー

>つまり 毎月 $300.00/台 とかという維持費がかかっていて
>これがほとんどを占める状況になりつつあります。
これって、めっちゃ古いサーバでも一律に同料金の維持費がかかっているのでしょうかね。

チューニングが進んだ新oysterなら、古いサーバに入っているマターリ系の板を多く抱え込めそう。
もっとも、ニュース系や実況系とはアクセスの質が違うから、
チューニング方法は少々代えなければいけないかもしれません……。
これを実行すると、相当数のサーバが退役できて、維持費が節約できそうです。

ここからは個人的願望ですが、そうなったら過去ログ用の専用サーバが欲しいですね。
実況系やニュース系を除いたマターリ系板。特に専門板は、実用的にも過去ログ用が読みたいです。
もちろんニュース系板のログも実用的じゃないことはないですが、
むしろ資料的な意味合いで、遠い未来に見てみると当時の世相が見られて面白いかも。(;^ ^

掲示板は、過去ログが自由に読めることに結構意味があると思います。



あと、退役したサーバをまとめてコンテナ輸送してヤフオクで売り飛ばせば、
更に運営費が捻出できるかも。それに面白そうですしね。

問題はやはり労力ですか……。>>811
815桶屋:04/01/08 21:59 ID:pWZgWxya
>>796
スピードを考えると、mod_perlはいいと思います。

問題は多分他にもあっても、スクリプトの生産性とメンテナンス性も考える必要があるかと。
bbs.cgiは、何かがあると直ぐにちょこちょこ更新されていきます。
変更する人がみんなmod_perlに対応した形で書ければいいのですが、
それができないと機能の追加とか変更が簡単じゃなくなるですねー。

ここらへんは、実際に書いている人の意見も聞いてみたいところですが……。


>>803
ちょっと別方面のお話を……。

ttp://www.atmarkit.co.jp/flinux/rensai/apache15/apache15a.html
ttp://www.atmarkit.co.jp/flinux/rensai/apache16/apache16a.html
ttp://www.tokyo-nagasaki.net/dayan/tips/unix/webserver.html

他と組み合わせないと、Apache単体だけでは"倍"も出せない気がしますね。
それでも積み重ねていけば、それなりにチューニングできそうなので、そこに期待と言うことでしょうか?

今日はいろいろな話が聞けて興味深かったなぁ〜
816動け動けウゴウゴ2ちゃんねる:04/01/08 22:11 ID:vodURly/
mod_perl化すると、C10K問題にすぐにぶつかりそうだな。
Shibuya Perl Mongerのスライドで紹介されているように。
Pound 1.6をport 80で待ち受けして。
*.cgiだったらkeepalive無しのApache + mod_perl。
*.gifとか*.jpgとか*.datとか*.txtだったらesehttpdかkeepalive付きの別port Apache。
なんてのが必要になるかも。
poundで負荷分散設定が出来るので「1板を複数サーバーで」というのが簡単に実現する余地ができるというメリットも。
817動け動けウゴウゴ2ちゃんねる:04/01/08 23:01 ID:SpnXyNw/
サーバーって2ちゃんねるの資産なん?違うような・・・
818動け動けウゴウゴ2ちゃんねる:04/01/09 08:34 ID:ktJoDjUM
>>814
過去ログの話が出たんでちょいと意見。
専用鯖ならarchive0(?)がすでにあるんですが、
これがほんとに倉庫化(単にtarをおいてあるだけ)してて、
実用的とはいいがたいですね。

過去ログに対する指針は議論するべき事項でしょうか>ひ(ryおよび★もちの人
819動け動けウゴウゴ2ちゃんねる:04/01/09 11:53 ID:ml3yxu7l
最低限、●持ちは2chブラウザか
壷経由ブラウザで見られるようにして欲しいなぁ…
820ひろゆき@どうやら管理人 ★:04/01/09 12:17 ID:???
>>796
期待しまくりです。期待しまくりです。
821外野ァァン:04/01/09 13:25 ID:CU9BhqNh
ヽ(`Д´)ノ ボッキアゲ
822root ★:04/01/09 23:02 ID:???
>>816 関連の俺様メモ(最近こればっか)。

Perlの強者が目黒に集結、Shibuya Perl Mongers 1周年記念テクニカルトーク
http://www.itmedia.co.jp/news/0310/21/nj00_spm.html

ad-hocな人生 - TAKESAKO (仮)
http://www.namazu.org/~takesako/diary/?date=20031018
Shibuya Perl Mongers 1周年記念テクニカルトーク
http://shibuya.pm.org/blosxom/techtalks/techtalks_200310.html
1周年記念テクニカルトーク 発表資料とレビューリンク集
http://shibuya.pm.org/blosxom/techtalks/techtalks_200310_slides_and_reviews.html
823root ★:04/01/09 23:10 ID:???
ところで、この人のプロフィールには、激しく同意だなぁ。

> いつも「いかにコードを書かずして問題を解決するか」を考えている不精者。

俺様メモ追加。
The C10K problem
http://www.kegel.com/c10k.html
824root ★:04/01/10 00:46 ID:???
体調不良からのリハビリを兼ねて、>>822 にあった発表資料を読んでみた。面白いすね。
Poundは、使う機会がありそう。KeepAliveの取り扱いとかも勉強になったです。
825root ★:04/01/10 01:43 ID:???
http://qb3.2ch.net/test/read.cgi/operate/1072877764/79-

これだけ携帯からアクセスが来てる現状を考えると、
i.2ch.net を早急にどこかに移行したい気がするです。
oyster137 (= www.2ch.net)上にもう一つバーチャルホストを切るとよさげな気が。
826root ★:04/01/10 01:58 ID:???
こんなかんじかしら。

1)i.2ch.net 用のバーチャルホストを oyster137 上に作る(私が作業、すぐできます)
2)i.2ch.net 上のコンテンツをごっそりコピー(特に問題ないでしょう)
3)現i.2ch.netを更新している人(とんすけさんとか?)に、更新手段(パスワードなど)を伝達
4)DNSを切り替え(i.2ch.netのIPアドレスを変更)
5)DNSが行き渡れば切り替え完了
827root ★:04/01/10 02:02 ID:???
ということで、15日ごろまで様子見か。

http://qb3.2ch.net/test/read.cgi/operate/1072877764/108-109
108 名前:仕事人 ★[sage] 投稿日:04/01/10 01:54 ID:???
ex 覗いてきたけど Load Average が高い意外は
とくに問題ないようだった

swap が始まってはいなかった
read.cgi , bbs.cgi が極端にコールされている訳でもなさそ、

>>106
15日ごろまで様子見たいです。
継続的に過負荷となってから次の一手を考えようかと、


109 名前:root ★[sage] 投稿日:04/01/10 02:01 ID:???
>>108
そうですね。こちらでもそう見えました。

移行するとなったら、
http://qb3.2ch.net/test/read.cgi/operate/1068017802/826 みたいな
かんじでいけるので(他のバーチャルホストの移行と同じ手法)、
そのときはまた。

いずれにせよ、i.2ch.net = ex.2ch.net = kuri5 = 非oyster なので、
いずれは移行が必要かと。
828とんすけ ◆MytskeE.Vg :04/01/10 02:33 ID:HvXSiCNp
 んと、なんかありそうなので。てか、鯖的にいつかはこういうことにはなるとは思って
ましたが。
 とりあえずですね、i.2ch.netが動くような事態がありましたらご連絡いただければ。
ICQが一番手っ取りばやいのかな?その後メールできちんとした連絡いただければ、と。
 私以外ではボヤさんあたりになりますかしらねぇ。
829root ★:04/01/10 02:38 ID:???
>>828
りょうかいです。
今も重いみたいすね。ex/i 。

とりあえず、おふろ。
しかしほんとに攻撃なのかしらん。
830動け動けウゴウゴ2ちゃんねる:04/01/10 02:50 ID:LJnRC+wm
>>829
本当にそうみたいですね
しかし、あっちの人たちは回線が混んでいるだけで
落ちた落ちたと喜んでいるみたいです。DoS攻撃するならネットワークの知識は身に付けろよ…
まぁ2ちゃんねるの全サーバーに目標を広げるだけの戦力はありませんので
もう少し様子見ですね
831ひろゆき@どうやら管理人 ★:04/01/10 11:14 ID:???
rootさんがつくった.krを蹴るやつをもういっかい入れてみました。
832動け動けウゴウゴ2ちゃんねる:04/01/10 11:18 ID:O8BG/WNu
>>831
お疲れさまです・・・
833root ★:04/01/10 14:21 ID:???
昨日寝る前に作って、ためしにexに一時的に入れて少しだけ動作確認した
(確かに入れたらLAが下がった)フィルタが、まさか役に立ってしまうとは。

2ちゃんねるに来るようになって3年目、今まで何度も何度も
「某所からの攻撃だ」という都市伝説を見てきたけど、、、なんだかなぁ。

もしumaサーバがやられれば、そのときはより綿密なログがとれるでしょう。
834root ★:04/01/10 14:31 ID:???
今日20:00でしたっけ。www.2ch.net がちょっと心配だなぁ。
835動け動けウゴウゴ2ちゃんねる:04/01/10 14:33 ID:O8BG/WNu
>>834
そうです・・・
836動け動けウゴウゴ2ちゃんねる:04/01/10 14:38 ID:LJnRC+wm
>>834
wwwが標的にされる可能性はほぼ100%でしょう
せっかく試験で絶大な効果を発揮したのに、入れないのはもったいない
せめて、7時〜exサーバーへの攻撃が止まるまでは規制入れておいたほうが良いかと
837root ★:04/01/10 15:10 ID:???
いつでも入れられるようにはしてあります。機を見て入れましょ。

それより「やり返せ」みたいなことにならないか、そっちのほうがよほど心配。
838動け動けウゴウゴ2ちゃんねる:04/01/10 15:11 ID:LJnRC+wm
>>837
一部の過激派だけのようです
ちゃんと、黙って見ていようという流れが出来ていますので
しかし、粘着質な人たちのいるサーバーがやられたらこの限りではありません…
839root ★:04/01/10 15:20 ID:???
これからしばらく外出なので、www.2ch.net にも一時的に入れてみた。
840動け動けウゴウゴ2ちゃんねる:04/01/10 15:57 ID:tj8OgVrs
20時にチョンがF5攻撃してくるから撃退しよう祭り開催
http://tmp2.2ch.net/test/read.cgi/download/1073716722/

韓国人ハッカー 2chハッキング宣言?
http://news4.2ch.net/test/read.cgi/news/1073465681/

ニュー速の方はかなり攻撃的になりつつありやす。
841動け動けウゴウゴ2ちゃんねる:04/01/10 16:44 ID:HvMh+opI
なんか、韓国人以外の便乗荒らしさんも暗躍
しそうだなぁ。つーか、煽られまくってるし。
842動け動けウゴウゴ2ちゃんねる:04/01/10 17:06 ID:LJnRC+wm
緊急そうな事
2ちゃんねるのサーバーにSYNFloodとかIPSpoodingとかに対抗できる対策はありますか?>root★氏
843動け動けウゴウゴ2ちゃんねる:04/01/10 17:11 ID:Ivc99ijp
643 名前:動け動けウゴウゴ2ちゃんねる 投稿日:04/01/10 17:00 ID:aZP3GcEW
http://www.packetstormsecurity.org/DoS/suf_v1.0.zip

上のツールをダウンして圧縮を解いた後,

ドスチァングで圧縮を解いたディレクトリを捜して入って行ってください.

そして

C:\suf_v1.0>suf (サーバー与えなさい)

参照で www2.2ch.netの住所は 216.218.133.82 です.

例:)
suf 216.218.133.82 [エンター]

他の所にもまき散らしてください.
844root ★:04/01/10 18:11 ID:???
戻りました。

ひょっとしてwww2にも、いろいろ試みてる人がいる?
845 ◆LBZUBURIYM :04/01/10 18:13 ID:SlW54UW3
>>844
しむらうしろー
846動け動けウゴウゴ2ちゃんねる:04/01/10 18:13 ID:r1h+lQjr
847root ★:04/01/10 18:14 ID:???
>>842
とりあえず、すべてのumaサーバには当初から↓入れてあります。
あと、何ができるかしら。

options TCP_DROP_SYNFIN #drop TCP packets with SYN+FIN
options ICMP_BANDLIM
848動け動けウゴウゴ2ちゃんねる:04/01/10 18:14 ID:LJnRC+wm
>>844
というかwww2がターゲットになってます。
早急に対策を
849root ★:04/01/10 18:14 ID:???
>>845-846
ふむふむ。

で、実害何か出ましたか?
850動け動けウゴウゴ2ちゃんねる:04/01/10 18:16 ID:LJnRC+wm
>>849
いや、全然です
涼しい顔して鯖は動いております
さすがuma系は違いますね
851● ◆Kvwt/4FxR2 :04/01/10 18:16 ID:wb0T/w+C
>>846
凄いな。。。
852動け動けウゴウゴ2ちゃんねる:04/01/10 18:17 ID:r1h+lQjr
トップはちょっと重いかな、という気はしますが
853 ◆LBZUBURIYM :04/01/10 18:17 ID:SlW54UW3
>>849
>>850に同じく。ただ,
鯖自体は落とさないようにしてわざと反撃させると言う
説もあるのでなんとも。
854動け動けウゴウゴ2ちゃんねる:04/01/10 18:18 ID:ss7ol/nq
>>849
一時的にLAが500を超えていました。
でも、体感的にはちょっと重いかなという程度。(笑)
855動け動けウゴウゴ2ちゃんねる:04/01/10 18:21 ID:r1h+lQjr
重い重い重い重い重い重い重い×7@運用情報
http://qb3.2ch.net/test/read.cgi/operate/1072877764/528
http://qb3.2ch.net/test/read.cgi/operate/1072877764/682

実際のところどうなのかわかりませんが。
856root ★:04/01/10 18:22 ID:???
これですか。>>854

2004/01/10 17:30:00 LA= 5:30PM up 29 days, 13:40, 0 users, load averages: 554.70, 223.87, 96.00
2004/01/10 17:40:00 LA= 5:40PM up 29 days, 13:50, 0 users, load averages: 296.48, 215.38, 135.11
2004/01/10 17:50:00 LA= 5:50PM up 29 days, 14 hrs, 0 users, load averages: 496.04, 493.80, 342.48
2004/01/10 18:00:00 LA= 6:00PM up 29 days, 14:10, 0 users, load averages: 12.84, 128.58, 224.43
2004/01/10 18:10:00 LA= 6:10PM up 29 days, 14:20, 1 user, load averages: 9.54, 25.46, 116.94

www2にはいつでもwwwと同じフィルタを入れられるようにしてありますが、
しばらくはこのままでいってみようかなと。

もう少し中身をチェックしてみましょ。
ほんとはもう1台マシンを用意してネットワーク的にタップして、
tcpdumpでも流しておくのが一番いいんだけど。
857動け動けウゴウゴ2ちゃんねる:04/01/10 18:25 ID:LJnRC+wm
>>856
おお、性能試験ですかw
見物ですな。静的コンテンツ用のベストチューニングが見つかるかもしれませんw
858動け動けウゴウゴ2ちゃんねる:04/01/10 18:27 ID:ss7ol/nq
>>856
それです。
LA500でも何事も無く動き続けるって、やっぱりすごいですねー。
私はuma鯖のようなハイスペックな鯖を触ったことが無いので‥‥。
859動け動けウゴウゴ2ちゃんねる:04/01/10 18:32 ID:ss7ol/nq
>>842 遅レス。
uma以外の古いサーバもrc.localあたりをゴニョゴニョして、
SYN Floodアタック対策はとってあるはずです。
860root ★:04/01/10 19:15 ID:???
いろんなことを、なさってるようで。
とりあえずsshで入ろうとしても、ログが残るだけで意味ないと思うんだけど。
861動け動けウゴウゴ2ちゃんねる:04/01/10 19:17 ID:tHZSAHaO
>>856
攻撃を逆に性能試験に利用するんですか。。。。
862root ★:04/01/10 19:30 ID:???
さて、いやんなメッセージが出たので、ちょっくら設定変えてrebootすっかな。< www2
pmap_collect: collecting pv entries -- suggest increasing PMAP_SHPGPERPROC
863root ★:04/01/10 19:35 ID:???
news8と同じ設定を入れた。

/boot/loader.conf:
vm.pmap.shpgperproc=1024
864動け動けウゴウゴ2ちゃんねる:04/01/10 19:38 ID:uzx0I4hf
スワップしますたか
865root ★:04/01/10 19:41 ID:???
swapは、相変わらず使ってないすよ。
Mem: 849M Active, 494M Inact, 386M Wired, 20K Cache, 199M Buf, 282M Free
866動け動けウゴウゴ2ちゃんねる:04/01/10 19:41 ID:uzx0I4hf
>>865 しかしすごいです

http://mumumu.mu/mrtg/mrtg-rrd.cgi/traffic/www2traf.html

グラフ見えなくなりそうです
867root ★:04/01/10 19:43 ID:???
>>866
こりゃ、さっきの設定変更のrebootの影響かもね。
しばらくするとほんとかどうかわかるかな。
868動け動けウゴウゴ2ちゃんねる:04/01/10 19:43 ID:uzx0I4hf
>>867 なる。レスどうもです。
869root ★:04/01/10 19:46 ID:???
まあ、グラフに入った変な数字は、後で手直しできるし。
しばらくこれで、様子見かな。

やばくなったら、www/exと同じアクセスコントロールを入れてみましょ。
870動け動けウゴウゴ2ちゃんねる:04/01/10 19:49 ID:6TuO0r5S
ワクワク
871動け動けウゴウゴ2ちゃんねる:04/01/10 20:00 ID:uzx0I4hf
韓国人ハッカー 2chをハッキング? ★6
http://news4.2ch.net/test/read.cgi/news/1073732125/63
---
廃人たちの活動が一番多い 11時で時間が変更になりました.
---

まあどこまでほんとかわからんですが念のため
872root ★:04/01/10 20:13 ID:???
20:00から、いろいろきはじめたですね。
www2のアクセス数は普段の50倍ぐらいかしら。
873root ★:04/01/10 20:15 ID:???
50倍じゃなくて、20倍か。スマソ。
25000access/5min のところに、450000/5min ぐらい。
874動け動けウゴウゴ2ちゃんねる:04/01/10 20:20 ID:6TuO0r5S
なんかフツーなんでつまんないんですけど
サンプルになった? >>873
875動け動けウゴウゴ2ちゃんねる:04/01/10 20:30 ID:71hK2OVj
この機会に全サーバ kr 規制をしてくれ。それも永久に。
876root ★:04/01/10 20:30 ID:???
さて、膠着状態だなぁ。< www2
フィルタをオンにして、実験してみるかな。
877root ★:04/01/10 20:33 ID:???
フィルタ入れると重くなるなぁ。
www2の場合、そのまま、流れのままにしとくほうがよさそうだ。
878動け動けウゴウゴ2ちゃんねる:04/01/10 20:34 ID:LJnRC+wm
>>876
いやぁ、実験は順調に進んでるみたいですねw
しかし、www鯖は古いのでこの攻撃は酷です
879root ★:04/01/10 20:34 ID:???
フィルタ入れたら、一瞬こんなになっちゃった。< www2

oyster137% uptime
3:32AM up 59 mins, 1 user, load averages: 748.37, 227.10, 94.63
880root ★:04/01/10 20:35 ID:???
やっぱ、はやいとこトップページとiモード入り口は切り替えたほうがいいすね、
と、仕事人さんにゆっておこう。
881動け動けウゴウゴ2ちゃんねる:04/01/10 20:35 ID:71hK2OVj
love 15.85 20:30
hobby 8.79 20:30
882動け動けウゴウゴ2ちゃんねる:04/01/10 20:38 ID:J7Jb61wl
883root ★:04/01/10 20:41 ID:???
なんだか絵の出が悪いようなので、www2のバックの壷の絵を、
メモリディスク上に一時的に置いてみた。

こんなこともあるかなと思って、各umaサーバにはメモリディスクをちょっぴり準備しておいたりして。
884動け動けウゴウゴ2ちゃんねる:04/01/10 20:47 ID:6TuO0r5S
それなりの実験は出来てるようだね
885root ★:04/01/10 20:50 ID:???
バックの壷はもともとiij4uにあったので、
いざとなれば、iij4uに戻せばいいし。
でも怒られるかな。
886動け動けウゴウゴ2ちゃんねる:04/01/10 20:50 ID:ss7ol/nq
httpdのレスポンスが、かなり悪くなっているような気がします。
887動け動けウゴウゴ2ちゃんねる:04/01/10 20:56 ID:71hK2OVj
888root ★:04/01/10 20:57 ID:???
めいっぱいみたいなので、様子を見ながらサーバ数を増やしてみようかな。
889root ★:04/01/10 20:58 ID:???
とりあえず 2048 => 2304
890動け動けウゴウゴ2ちゃんねる:04/01/10 21:00 ID:GXYTMGLP
keepaliveの設定を触ってみては?
891root ★:04/01/10 21:03 ID:???
さらに 2304 => 2560
892root ★:04/01/10 21:03 ID:???
少なくすればいいのかな? >>890
893動け動けウゴウゴ2ちゃんねる:04/01/10 21:07 ID:GXYTMGLP
とりあえずtimeoutを1秒とかに。
一般ブラウザは連続でアクセスするからmaxrequestは10位?
UAかIPで判定可能なら
攻撃目的のものはkeepalive自体をoffに(出来るなら)
894root ★:04/01/10 21:08 ID:???
2560は苦しそうなので、2304 に戻した。

>>893
どうも。やってみるです。
895root ★:04/01/10 21:15 ID:???
MaxKeepAliveRequests 10 (旧: 100)
KeepAliveTimeout 1(旧: 15)

にしてみた。>>893
896root ★:04/01/10 21:21 ID:???
>>895 をいじったので、サーバ数を 2048 に戻した。
なんだか、攻撃が強くなってきた気もするけど、他のサーバはどうなんでしょ。
897動け動けウゴウゴ2ちゃんねる:04/01/10 21:23 ID:J7Jb61wl
>>896
exに相変わらず来ているようです
http://ch2.ath.cx/load/ex.html

あとは通常通り
898root ★:04/01/10 21:30 ID:???
きつくなってきたなぁ。
4:29AM up 24 mins, 2 users, load averages: 825.39, 603.25, 369.40

壷の絵を分散してみるか。
899動け動けウゴウゴ2ちゃんねる:04/01/10 21:32 ID:LJnRC+wm
>>898
ん?私が素人なのかもしれませんが
1userから2usersに増えてません?
900サザン ★:04/01/10 21:34 ID:???
ひろさんと予想してみる
901root ★:04/01/10 21:36 ID:???
1000いったか、、、。
4:35AM up 30 mins, 2 users, load averages: 1011.14, 850.57, 567.18

>>899-900
よくみてるなぁ。単純に緊急用にもうひとつ窓開けただけすよ。
902動け動けウゴウゴ2ちゃんねる:04/01/10 21:36 ID:Lmsq1ee0
薬師丸ひろこか!( ゚д゚)
903サザン ★:04/01/10 21:37 ID:???
>>901
うわ、すっげーすっげー、
904root ★:04/01/10 21:38 ID:???
壷の絵と背景をwww2から退避、、、。
2ch.htmlも退避するかな。
905動け動けウゴウゴ2ちゃんねる:04/01/10 21:38 ID:RWpE/RVl
ipfwによる処置は?
906動け動けウゴウゴ2ちゃんねる:04/01/10 21:39 ID:LJnRC+wm
>>901
もしかしたら、侵入者じゃないかと思いまして
まぁ良かった
あっちの方々、今度はUDPFloodを出してきたようです
気をつけてくださいな
907動け動けウゴウゴ2ちゃんねる:04/01/10 21:40 ID:z4ZTd66x
壷画像をキムチの壷に変える案は採用されなかったのか
あれ受けたのに
908root ★:04/01/10 21:43 ID:???
2ch.html と new2ch.gif も退避した。
これで、http://www.2ch.net/ から入るほうは、とりあえず問題ないかと。
909仕事人 ★:04/01/10 21:45 ID:???
なんかみんな楽しげだったり、
910動け動けウゴウゴ2ちゃんねる:04/01/10 21:45 ID:J7Jb61wl
>>908 とっても快適です
911動け動けウゴウゴ2ちゃんねる:04/01/10 21:46 ID:LJnRC+wm
>>908
一瞬にして軽くなりました
しかし、あの(ryに移しましたか…
912動け動けウゴウゴ2ちゃんねる:04/01/10 21:47 ID:ss7ol/nq
うわぁ。
4桁のLAって、初めて見ました。(^_^;
913root ★:04/01/10 21:49 ID:???
www2のも同じように退避した。
914root ★:04/01/10 21:50 ID:???
>>909
起こってしまった以上、楽しまなきゃ、
って教えてくれたのは、仕事人さん。
915動け動けウゴウゴ2ちゃんねる:04/01/10 22:00 ID:ss7ol/nq
www2の入り口に張ってある広告バナーのサイト、
大変なことになってるでしょうね。(^_^;
916root ★:04/01/10 22:04 ID:???
ネットワーク的につぶされてて(UDPをぼこすか送ってきてるのかな)、統計情報がとれてないけど、
壷の絵と背景と2ch.htmlをnews8に動かしてからは、
www.2ch.net/www2.2ch.netとも、サービスには大きな影響なくなったかな。
917動け動けウゴウゴ2ちゃんねる:04/01/10 22:04 ID:Lmsq1ee0
役得役得w
918root ★:04/01/10 22:11 ID:???
www.2ch.net や www2.2ch.net に正常にアクセスできなくなったら、報告してちょ。
ただ、観測するのも負荷のうちということをおわすれなくです。
919動け動けウゴウゴ2ちゃんねる:04/01/10 22:14 ID:J7Jb61wl
ここで報告してもあまり意味がないかと思いますが

電波2ちゃんねる書初め大会
http://paint.gazo-box.com/2004/pallet_town.html

ここにも来ているようです
920動け動けウゴウゴ2ちゃんねる:04/01/10 22:18 ID:LJnRC+wm
>>919
電波2ちゃんねるの方に知らせると
喜んでくれるかもしれません
921動け動けウゴウゴ2ちゃんねる:04/01/10 22:23 ID:nBKIQFYu
922root ★:04/01/10 22:23 ID:???
一時的に退避。>>921
923root ★:04/01/10 22:24 ID:???
.htaccess じゃなくて、httpd.confに直書きしてみた。< www2のアクセス制限
924root ★:04/01/10 22:29 ID:???
>>923 の後、かなり軽くなったすね。LAが2桁になったし。
925root ★:04/01/10 22:29 ID:???
これで、23:00まで様子見?
926動け動けウゴウゴ2ちゃんねる:04/01/10 22:32 ID:aUFXm2yn
>>925 今のところそんな感じかと。

>>920

画箱削除依頼
http://jbbs.shitaraba.com/computer/bbs/read.cgi?BBS=2999&KEY=1068189507
ホスト規制で書けませんでした・・・もしよかったら誰かお願いします。
927動け動けウゴウゴ2ちゃんねる:04/01/10 23:04 ID:NEkbzHYq
>>926
依頼してみました。
928動け動けウゴウゴ2ちゃんねる:04/01/10 23:10 ID:aUFXm2yn
>>927 どうもです。
929root ★:04/01/10 23:11 ID:???
www2はあいかわらずきてるけど、まぁ、こんなもんなら平気かな。
6:08AM up 49 mins, 1 user, load averages: 175.85, 98.44, 54.52
930root ★:04/01/10 23:25 ID:???
また、1000いくかな。
6:25AM up 1:06, 1 user, load averages: 952.54, 954.54, 483.30
931未承諾広告※ ◆aiY4htt2.2 :04/01/10 23:30 ID:veeDFTIu
uma系は 1000 以上も表示できるようにしなきゃ(w@監視係。グラフ
932動け動けウゴウゴ2ちゃんねる:04/01/10 23:47 ID:52u+wogu
www2.2ch.netも重いけど何とか持ちそうですかね?
news8が駄目っぽいので壷画像表示されませんけど。
933root ★:04/01/11 00:25 ID:???
news8、あがったけど、すごいなぁ。
7:25AM up 8 mins, 2 users, load averages: 474.71, 167.80, 67.56
934動け動けウゴウゴ2ちゃんねる:04/01/11 00:32 ID:IgRVqR5Z
壷の画像ファイルをやめてみたら?
935root ★:04/01/11 00:34 ID:???
画像は、別のところ(某氏が画像つくってる模様)に置こうかと。
またお世話になります(^_^;)ocnさん
937root ★:04/01/11 00:38 ID:???
マ(りゃ さんのところにかえた。
しかし、O×Nの中の人も大変だなぁ。
938動け動けウゴウゴ2ちゃんねる:04/01/11 00:38 ID:E0iCAI+I
某氏って誰かと思ったら‥‥。
軽々表示してる(^_^;)さすがocn
940root ★:04/01/11 00:42 ID:???
向こうは仕事だしね(w。こっちは、おたのしみ。

で、できればback.jpgもいれてもらえるとうれしいなぁと。
941root ★:04/01/11 00:56 ID:???
back.jpgも置いてもらいました。
942root ★:04/01/11 01:39 ID:???
news8、再調整のため再度落としてます。
943root ★:04/01/11 02:24 ID:???
ごにょごにょの説明は、落ち着いたらここに書くことにしよう。
944動け動けウゴウゴ2ちゃんねる:04/01/11 02:26 ID:E0iCAI+I
>>943
お疲れさまでした。
こんなに劇的に軽くなるなんて不思議。
945動け動けウゴウゴ2ちゃんねる:04/01/11 03:29 ID:gC8c72VJ
options MAXDSIZ
って"(2047*1024*1024)"まで拡張したっけ?
今月のUNIX USER p.48参照。
946root ★:04/01/11 03:38 ID:???
OCNに退避していた画像関係をwww2に戻しました。
947動け動けウゴウゴ2ちゃんねる:04/01/11 03:41 ID:gIVi3I0L
大丈夫かなぁ・・・(´人`)ナムナム
948root ★:04/01/11 03:52 ID:???
>>945
kern.maxdsiz=なんちゃら
kern.dfldsiz=かんちゃら
kern.maxssiz=はんちゃら

を、/boot/loader.conf に追加すれば、カーネルをコンパイルしなおさなくてもいいです。
今はやってないけど、必要ならやってもいいかもね。
949動け動けウゴウゴ2ちゃんねる:04/01/11 09:00 ID:uWRG4GyQ
つーかね。ぜんぜん書き込めませんよ。
950root ★:04/01/11 21:27 ID:???
トップページ(www.2ch.net)はumaサーバではないため、私はごにょごにょできません。
IEや壷をお使いの方は、当面こちらからお入りいただけると。

 http://www2.2ch.net/
 http://www2.2ch.net/2ch.html

もしwww2もつぶれるようなら、Pound(>>816)あたりを入れて分散を図ってみようかと。
951動け動けウゴウゴ2ちゃんねる:04/01/11 21:35 ID:E0iCAI+I
>>950
その、「ごにょごにょ」は、汎用性のあるものなのでしょうか?
たとえばRedHatなどにも入るものですか?
952root ★:04/01/11 21:40 ID:???
「ごにょごにょ」の概要は、騒動が一段落したらぼちぼちとここにでも。
953動け動けウゴウゴ2ちゃんねる:04/01/11 21:50 ID:E0iCAI+I
>>952
そか、そうですよね。手の内を晒す事になるし。<騒動が一段落したら
いえ、実は負荷監視所が断続的にアタックされてるので
どうしたものかなと思ってまして。(^_^;
今のところ、せいぜいLAが1桁なので、とりあえずアレして
落ちるほど来たら最終兵器を使ってみます。(笑)
954root ★:04/01/11 21:59 ID:???
負荷監視所の中の人ですか。いつも乙です。
Linuxなら、netfilter/iptablesが定跡かなと。

で、http://www2.2ch.net/_service/ を作ってあるので、
ここの負荷も監視していただけるとうれしいかなと。
955動け動けウゴウゴ2ちゃんねる:04/01/11 22:11 ID:E0iCAI+I
>>954
やっぱりフィルタですよね?とりあえず入れてみます。
(というか、入れてもらうんですが。(^^ゞ)

www2は、pinkと被るのでちょっと表示が変になりました。(^_^;
956動け動けウゴウゴ2ちゃんねる:04/01/11 22:48 ID:Xp1M8vLN
etcはこちょこちょ出来ないんかい? mumumuタソ
957root ★:04/01/11 23:52 ID:???
>>956
etcは新oysterですけど、umaサーバじゃないすね。
というわけでごにょごにょは(りゃ。

etcは新oysterの中でもかなりパフォーマンス出てるほうなんだけどなぁ、、、ううむ。
958root ★:04/01/12 00:01 ID:???
すべてのumaサーバは、昨晩のうちに既にwww2/news8と同様ごにょごにょ済です。

(2004年1月12日現在のumaサーバと収容板一覧)
oyster173: news6.2ch.net/news7.2ch.net / mnewsplus, trafficinfo, appli, femnewsplus
oyster174: life3.2ch.net / diet, fashion, female, kankon, live
oyster175: news5.2ch.net / newsplus
oyster176: bbq.2ch.net/rock54.2ch.net / BBQ/BBX/BBY/Rock54システム用
oyster132: qb3.2ch.net / operate, sec2ch, sec2chd
oyster133: gamble2.2ch.net / gamble, keiba, mj, pachi, slot
oyster134: tmp2.2ch.net / asia, bakanews, cat, company, download, ihan, ihou, joke, kitchen, kova, lobby, mog2, sisou, rights, tubo, youth
oyster135: news8.2ch.net / eq, eqplus
oyster136: science2.2ch.net / bake, denki, doboku, earth, future, infosys, kikai, life, material, math, nougaku, rikei, sci, sim, sky, wild
oyster137: www2.2ch.net / 入り口
oyster138: game5.2ch.net / ff, game, gameover, gamerpg, ghard
oyster139: aa3.2ch.net / aastory, kao, mona
oyster140: sports6.2ch.net / boxing, budou, k1, sumou, wres
oyster141: music3.2ch.net / asong, dj, hiphop, msaloon, music, musice, musicnews, techno, wmusic
oyster142: tv4.2ch.net / am, ami, apple, bs, celebrity, cm, cs, movie, nhk, skyp, tv2, tvsaloon
959動け動けウゴウゴ2ちゃんねる:04/01/12 00:02 ID:+xRrWAF+
そっか イヂレナイとこなのか
とりあえず生き返ってるようなのでよしとするか
960796@ s068197.ap.plala.or.jp:04/01/12 17:07 ID:dNwDw4LB
>>796の奴、とりあえず一段落つけて体裁だけ整えてみたんですが
どっかにうpして軽く目を通してもらうのが良いんですかね?

インターナショナルな祭りが一段落したら
(bbs.cgiスレは明らかにスレ違いなので)
続けるなら別スレを立ててもらうって事で。
961root ★:04/01/12 17:16 ID:???
>>960
すごく、よいと思いますです。
962796@ s068197.ap.plala.or.jp:04/01/12 17:29 ID:dNwDw4LB
とりあえず、これでお願いします。
http://www.42ch.net/UploaderSmall/source/1073895937.zip
どっかにミラーしてもらえれば。
9632ch壷愛用者〜ヘ(゚д゚ヘ))))))〜61 ◆GIKOZNVVBs :04/01/13 02:08 ID:o3jHs/Mb
964(゚д゚)ウマー ◆UMAAgzjryk :04/01/13 02:59 ID:qs/eCU5u
(#゚д゚)<ウマ━━━━━━━━━━━━作戦発動ッ!!











いや…ただ言ってみたかったダケれす…
965root ★:04/01/13 03:06 ID:???
>>963
おつです。

>>964
フフフ(AAりゃ。
966root ★:04/01/13 04:04 ID:???
寝る前に気づいたので、俺様メモ。

news6、ついに、r.i+p.iの数が、read.cgiの数を上回りました。
http://mumumu.mu/mrtglog/2004/01/13/read/news6read.html

かなり歴史的と思われ。
967root ★:04/01/13 04:05 ID:???
>>966
averageの値とか見ると厳密には上回ってないみたいだけど、来るべき時がきたな、という感じです。
968root ★:04/01/13 04:27 ID:???
記念に、ここにも貼っておこう。

17 名前:root ★[sage] 投稿日:04/01/13 03:41 ID:???
www2のごにょごにょが弾いて、出元・日時等を記録した数のまとめ。

調査日時: Jan 11 03:00 PST 〜 Jan 12 03:00 PSTの24時間
アタック回数の合計: 306,503,194 回
最多を記録したアドレスブロック: 220.64.0.0/11
そのアドレスブロックからのアタック回数: 61,751,947 回

24 名前:root ★[sage] 投稿日:04/01/13 03:43 ID:???
1日分のログファイルの容量: gzip圧縮で72817956バイト
969動け動けウゴウゴ2ちゃんねる:04/01/13 04:30 ID:fAprs2gz
>>968
まだ起きていたのか。w
御疲れー
970動け動けウゴウゴ2ちゃんねる:04/01/13 04:31 ID:GBN47ymw
>>968
お疲れ
971root ★:04/01/13 13:20 ID:???
FreeBSD 5.2R、出た。

> - Full Tier-1 support for single and multiprocessor AMD Athlon64 and
> Opteron systems.

まずは、めでたい。
972root ★:04/01/13 13:21 ID:???
ん、でも、

FreeBSD 5.2 also contains a number of significant stability and performance
improvements over FreeBSD 5.1. However, it is still considered a 'New
Technology' release and might not be suitable for all users. Those with
more conservative needs may prefer to continue using FreeBSD 4.X.

だそうで。
973動け動けウゴウゴ2ちゃんねる:04/01/13 14:03 ID:dCJPn1eV
>>971
amd64はかなりメモリを選ぶとか聞きますね。
あとkldがまだ動かないとか。

Releaseが出たんですね。
普段currentで暮らしているので気にしてませんでした。
974 ◆LBZUBURIYM :04/01/13 18:09 ID:1y8eMPd8
>>972
んー,Opteron安定運用にはまだ遠いかもですね…
975動け動けウゴウゴ2ちゃんねる:04/01/13 19:19 ID:xGkMLDNI
>>974
FreeBSD 5.2 モナ
976動け動けウゴウゴ2ちゃんねる:04/01/13 20:48 ID:s+qKQ9s0
ごにょごにょってなーにー?
977 ◆LBZUBURIYM :04/01/13 21:23 ID:1y8eMPd8
>>975
うひゃっ
ですねー(^_^;)
978796:04/01/13 21:59 ID:Cjy2x3gj
>>963
ありがとうございますです。
979動け動けウゴウゴ2ちゃんねる:04/01/13 23:12 ID:xGkMLDNI
でも 2ch のどこかで FreeBSD の5系を動かして欲しい気もする。
980動け動けウゴウゴ2ちゃんねる:04/01/14 23:49 ID:3BIpD3Bf
ここってumaなんだよな
umaで良かったのか悪かったのか・・・w
981動け動けウゴウゴ2ちゃんねる:04/01/15 00:38 ID:Fhct3Es+
(゚д゚)ウマ-
982動け動けウゴウゴ2ちゃんねる:04/01/15 00:40 ID:/zgNeR2c
>>979
そのどこかが、(((( ;゚Д゚)))ガクガクブルブル
983動け動けウゴウゴ2ちゃんねる:04/01/15 02:27 ID:GnIdWGCC
(゚д゚) ウシー
984動け動けウゴウゴ2ちゃんねる:04/01/15 07:52 ID:LHP5sMe5
(゚д゚)シカー
985動け動けウゴウゴ2ちゃんねる:04/01/15 08:19 ID:3vHSv+sO
一応断りを入れて置きます。
ゴメンナサイゴメンナサイ556が悪いんです。

554 名前:動け動けウゴウゴ2ちゃんねる 投稿日:04/01/15 08:08 ID:3vHSv+sO
ちょっと、向こうの田代砲で
ttp://www2f.biglobe.ne.jp/~takan/javac/n2/confirm1.htm
ここを撃ってみた。
案の定攻撃が効かないぽ。
田代返しに使えない?

うん、俺にわかるのはここまでだ、あとは任せた。

556 名前:● ◆HETAREzfq. 投稿日:04/01/15 08:11 ID:S2PEw3U2
>>554
それ、umaスレあたりにも書いておいた方がいいぞ。(一応断りを入れて)
ここだとレスの山に埋もれる。。
986これがマンコの実態だ!参ったか!:04/01/15 08:21 ID:peVJ04rl
ウッホッホーイ。
 
がんばっとるね。諸君。
 
しかし、悲しいかな報告漏れも多いねえ。
 
やはり社会的落伍者諸君に完璧な仕事を求めるのは無理なのかねえ。
 
まあ、デキの悪いなりに、これからもガンバリたまえ。
 
応援しとるよ。
 
ウワッハッハッハッハッハ    ♪
987これがマンコの実態だ!参ったか!:04/01/15 08:21 ID:HTbcgV6c
ウッホッホーイ。
 
がんばっとるね。諸君。
 
しかし、悲しいかな報告漏れも多いねえ。
 
やはり社会的落伍者諸君に完璧な仕事を求めるのは無理なのかねえ。
 
まあ、デキの悪いなりに、これからもガンバリたまえ。
 
応援しとるよ。
 
ウワッハッハッハッハッハ    ♪
988これがマンコの実態だ!参ったか!:04/01/15 08:22 ID:Ko7/r2G7
ウッホッホーイ。
 
がんばっとるね。諸君。
 
しかし、悲しいかな報告漏れも多いねえ。
 
やはり社会的落伍者諸君に完璧な仕事を求めるのは無理なのかねえ。
 
まあ、デキの悪いなりに、これからもガンバリたまえ。
 
応援しとるよ。
 
ウワッハッハッハッハッハ    ♪
989これがマンコの実態だ!参ったか!:04/01/15 08:23 ID:O9YyK5FY
ウッホッホーイ。
 
がんばっとるね。諸君。
 
しかし、悲しいかな報告漏れも多いねえ。
 
やはり社会的落伍者諸君に完璧な仕事を求めるのは無理なのかねえ。
 
まあ、デキの悪いなりに、これからもガンバリたまえ。
 
応援しとるよ。
 
ウワッハッハッハッハッハ    ♪
990これがマンコの実態だ!参ったか!:04/01/15 08:23 ID:HTbcgV6c
ウッホッホーイ。
 
がんばっとるね。諸君。
 
しかし、悲しいかな報告漏れも多いねえ。
 
やはり社会的落伍者諸君に完璧な仕事を求めるのは無理なのかねえ。
 
まあ、デキの悪いなりに、これからもガンバリたまえ。
 
応援しとるよ。
 
ウワッハッハッハッハッハ    ♪
991これがマンコの実態だ!参ったか!:04/01/15 08:26 ID:peVJ04rl
ウッホッホーイ。
 
がんばっとるね。諸君。
 
しかし、悲しいかな報告漏れも多いねえ。
 
やはり社会的落伍者諸君に完璧な仕事を求めるのは無理なのかねえ。
 
まあ、デキの悪いなりに、これからもガンバリたまえ。
 
応援しとるよ。
 
ウワッハッハッハッハッハ    ♪
992これがマンコの実態だ!参ったか!:04/01/15 08:27 ID:O9YyK5FY
ウッホッホーイ。
 
がんばっとるね。諸君。
 
しかし、悲しいかな報告漏れも多いねえ。
 
やはり社会的落伍者諸君に完璧な仕事を求めるのは無理なのかねえ。
 
まあ、デキの悪いなりに、これからもガンバリたまえ。
 
応援しとるよ。
 
ウワッハッハッハッハッハ    ♪
993これがマンコの実態だ!参ったか!:04/01/15 08:28 ID:peVJ04rl
ウッホッホーイ。
 
がんばっとるね。諸君。
 
しかし、悲しいかな報告漏れも多いねえ。
 
やはり社会的落伍者諸君に完璧な仕事を求めるのは無理なのかねえ。
 
まあ、デキの悪いなりに、これからもガンバリたまえ。
 
応援しとるよ。
 
ウワッハッハッハッハッハ    ♪
994これがマンコの実態だ!参ったか!:04/01/15 08:30 ID:HTbcgV6c
ウッホッホーイ。
 
がんばっとるね。諸君。
 
しかし、悲しいかな報告漏れも多いねえ。
 
やはり社会的落伍者諸君に完璧な仕事を求めるのは無理なのかねえ。
 
まあ、デキの悪いなりに、これからもガンバリたまえ。
 
応援しとるよ。
 
ウワッハッハッハッハッハ    ♪
995これがマンコの実態だ!参ったか!:04/01/15 08:30 ID:Ko7/r2G7
ウッホッホーイ。
 
がんばっとるね。諸君。
 
しかし、悲しいかな報告漏れも多いねえ。
 
やはり社会的落伍者諸君に完璧な仕事を求めるのは無理なのかねえ。
 
まあ、デキの悪いなりに、これからもガンバリたまえ。
 
応援しとるよ。
 
ウワッハッハッハッハッハ    ♪
996これがマンコの実態だ!参ったか!:04/01/15 08:32 ID:O9YyK5FY
ウッホッホーイ。
 
がんばっとるね。諸君。
 
しかし、悲しいかな報告漏れも多いねえ。
 
やはり社会的落伍者諸君に完璧な仕事を求めるのは無理なのかねえ。
 
まあ、デキの悪いなりに、これからもガンバリたまえ。
 
応援しとるよ。
 
ウワッハッハッハッハッハ    ♪
997これがマンコの実態だ!参ったか!:04/01/15 08:33 ID:peVJ04rl
ウッホッホーイ。
 
がんばっとるね。諸君。
 
しかし、悲しいかな報告漏れも多いねえ。
 
やはり社会的落伍者諸君に完璧な仕事を求めるのは無理なのかねえ。
 
まあ、デキの悪いなりに、これからもガンバリたまえ。
 
応援しとるよ。
 
ウワッハッハッハッハッハ    ♪
998これがマンコの実態だ!参ったか!:04/01/15 08:33 ID:HTbcgV6c
ウッホッホーイ。
 
がんばっとるね。諸君。
 
しかし、悲しいかな報告漏れも多いねえ。
 
やはり社会的落伍者諸君に完璧な仕事を求めるのは無理なのかねえ。
 
まあ、デキの悪いなりに、これからもガンバリたまえ。
 
応援しとるよ。
 
ウワッハッハッハッハッハ    ♪
999これがマンコの実態だ!参ったか!:04/01/15 08:34 ID:Ko7/r2G7
ウッホッホーイ。
 
がんばっとるね。諸君。
 
しかし、悲しいかな報告漏れも多いねえ。
 
やはり社会的落伍者諸君に完璧な仕事を求めるのは無理なのかねえ。
 
まあ、デキの悪いなりに、これからもガンバリたまえ。
 
応援しとるよ。
 
ウワッハッハッハッハッハ    ♪
1000動け動けウゴウゴ2ちゃんねる:04/01/15 08:34 ID:V2uwhjMt
1000
10011001
このスレッドは1000を超えました。
もう書けないので、新しいスレッドを立ててくださいです。。。