2ch特化型サーバ・ロケーション構築作戦 Part27

このエントリーをはてなブックマークに追加
909 株価【940】 △△ ◆cZfSunOs.U
http://qb5.2ch.net/test/read.cgi/operate/1207973589/93
ということで,全鯖配布用 .htaccess に以下の設定を追加.

RewriteEngine On
RewriteCond %{DOCUMENT_ROOT}/test/read.cgi !-f
RewriteRule /?read\.cgi/? /test/read.html
910FOX ★:2008/04/13(日) 00:26:29 ID:???0
tmp7 も?
911stream ◆PNstream2s :2008/04/13(日) 00:30:44 ID:ywbeE//m0
>>909
IE7もFirefoxも文字化けしてますよ
912動け動けウゴウゴ2ちゃんねる:2008/04/13(日) 00:31:07 ID:8ShoXtKoP
tmp7は入ってない
913動け動けウゴウゴ2ちゃんねる:2008/04/13(日) 00:33:48 ID:dNkqcYxg0
文字化け何とかして
914 株価【940】 △△ ◆cZfSunOs.U :2008/04/13(日) 00:35:09 ID:2j/Y2XY60
.htaccess の設定でミスがあったので,次の配布の 0:40 ぐらいまでちょっとお待ち下さい......
915動け動けウゴウゴ2ちゃんねる:2008/04/13(日) 00:38:24 ID:zj4uHz890
>>912
あれ灰ってね?
916 株価【940】 △△ ◆cZfSunOs.U :2008/04/13(日) 00:41:31 ID:2j/Y2XY60
tmp 系は除外ですかね? こうしますた.

RewriteEngine On
RewriteCond %{DOCUMENT_ROOT}/test/read.cgi !-f
RewriteCond %{HTTP_HOST} !^tmp\d*\.2ch\.net$
RewriteRule /?read\.cgi/? /test/read.html
917動け動けウゴウゴ2ちゃんねる:2008/04/13(日) 00:44:09 ID:zj4uHz890
tmp7人大杉確認
918動け動けウゴウゴ2ちゃんねる:2008/04/13(日) 00:44:57 ID:snz6m59l0
tmp系もやるために管理人に許可取ったんでなかったんかい
919FOX ★:2008/04/13(日) 00:45:39 ID:???0
qb6とかもなんかあるんじゃなかったっけ
920動け動けウゴウゴ2ちゃんねる:2008/04/13(日) 00:49:12 ID:hyDAFJJdP
ああ、qb6は元々、動いてないよね>read.cgi
921 株価【940】 △△ ◆cZfSunOs.U :2008/04/13(日) 00:49:36 ID:2j/Y2XY60
>>918 http://qb5.2ch.net/test/read.cgi/operate/1207973589/123 で照会中......

>>919 qb6 には read.html が入ってないので,結果的に人大杉になります.
922動け動けウゴウゴ2ちゃんねる:2008/04/13(日) 01:01:55 ID:TVTorZbK0
>>921
qb6には入れてくれないのですか?
923 株価【940】 △△ ◆cZfSunOs.U :2008/04/13(日) 01:06:09 ID:2j/Y2XY60
>>922 いろいろ「大人の事情」があるらしいのです......
924動け動けウゴウゴ2ちゃんねる:2008/04/13(日) 01:32:54 ID:bOyqi72tP
大人の情事
925 株価【1040】 △△ ◆cZfSunOs.U :2008/04/13(日) 02:12:13 ID:2j/Y2XY60
mod_rewrite の罠がまだ science6 と academy6 には残っていたらしく,
全鯖配布用 .htaccess に >>909,916 のような設定を入れるとそれらの鯖で問題が生じるので,
人大杉の鯖で個別に >>909 の設定を test/.htaccess に入れることに......
926FOX ★:2008/04/13(日) 02:13:40 ID:???0
927輝春 ◆LoveRuxFFY :2008/04/13(日) 06:55:37 ID:qbTgzK2z0 BE:1248408386-S★(777781)
オツ
928root▲▲ ★:2008/04/13(日) 23:45:10 ID:???0 BE:2463539-DIA(100256)
んと、昨日はほとんどアクセスしなかったんですが、

従来: read.cgi がない時 → 人大杉を表示

が、管理人の指令により、

今後: read.cgi がない時 → read.html に自動書き換え
ただし、qb6 と tmp7 を除く

になった、ということですか。
929root▲▲ ★:2008/04/13(日) 23:46:56 ID:???0 BE:1824454-DIA(100256)
で、UTF-8 化の検討が、、、と。

datをUTF8にするのはどうだろうスレッド
http://qb5.2ch.net/test/read.cgi/operate/1207973589/
930 株価【940】 △△ ◆cZfSunOs.U :2008/04/14(月) 00:53:54 ID:uW55yU790
>>928 そのようですね.

ただ,今回は個別鯖の test/.htaccess で対応させたんですが,
今後別の件で全体配布用 .htaccess で mod_rewrite の設定をしたいことも
出てくるかも知れないので,academy6 / science6 の httpd.conf の設定を
見直してもらった方がいいような気がします.大昔の人大杉規制か何かの名残で

RewriteRule ^/test/ - [F]

に類する設定がそれらの鯖の httpd.conf に入っているのではないかと思うんですが,
今となってはその設定を活用することはない,むしろ mod_rewrite を使う上での
障害にしかならないので......


>>929 いろいろスクリプト・プログラムの対応が大変そうですね......
UTF-8 に全面移行ならそれはそれで割り切ればいいんですが,
Shift JIS と UTF-8 の混在環境に対応させるとなると,
日本語メッセージをスクリプト・ソース中で直に書いてある部分などは
CSI 化しないといろいろ問題がありそうな悪寒......
931root▲▲ ★:2008/04/14(月) 13:22:47 ID:???0 BE:2918584-DIA(100256)
某所に向けたひとりごと:

○フロントの自動切り離しのコンセプト:

a) 受付嬢から何らかの形で各フロントサーバのサービスを逐次監視する

- port 80につながるか、とか、ping通るか、とか

b) サービスが落ちたことを検知したら matd.cf を書き換えて
該当サーバの MAC アドレスを削除し、matd に HUP シグナルを送る
daemontools 配下なら svc -h 一発

c) これで落ちたやつは切り離される

d) 1)のプロセスは監視を続け、フロントの復旧を確認したら、
b) の逆をやる。

e) これで復旧する
932root▲▲ ★:2008/04/14(月) 13:26:03 ID:???0 BE:6567089-DIA(100256)
>>931 はたぶん、

1) フロントのサービスを監視する常駐プロセス
2) そのプロセスからイベントドリブンに起動される切り離し(または復旧)スクリプト

っていう感じになるんだろうなと。

2) はお手製のシェルスクリプトとかPerlスクリプトでいけるんでしょう、きっと。

1) をやってくれるような、いいプログラムはないものか。
きっとあると思うんだけど、あまり調べてないですね。
/usr/ports/sysutils/ の下あたりをあさってみると、何か埋まっているかも。

ということで私はちょっと早めの時間切れ、、、。
933 株価【800】 △△ ◆cZfSunOs.U :2008/04/17(木) 06:35:00 ID:ZOTbmmUH0
>>925 むしろ逆に,罠のある academy6, science6, 2chplus の各鯖の test/.htaccess で

RewriteEngine Off

という設定を入れれば全鯖配布用 .htaccess で mod_rewrite の設定が
可能になると気付いたので,そうしますた.
934root▲▲ ★:2008/04/18(金) 22:51:00 ID:???0 BE:1824645-DIA(100256)
>>933
なるほど、そのほうがよさげですね。

で、7.0Rはとりあえず順調の模様。

◆サーバー(鯖)を増強したいという夢を現実に反映させるスレ◆
http://qb5.2ch.net/test/read.cgi/operate/1207379976/389-

・gccが上がったせいか、オプティマイズするとofflaw.cgiが動かなかった

ぐらいか。これはきっと64bit版でもいろいろあるかも。

あとはこのへんを改めて読む感じか。

http://qb5.2ch.net/test/read.cgi/operate/1207379976/443
> http://www.freebsd.org/releases/7.0R/relnotes.html
> http://people.freebsd.org/~kris/scaling/7.0%20Preview.pdf
935root▲▲ ★:2008/04/18(金) 23:15:09 ID:???0 BE:2736465-DIA(100256)
> http://people.freebsd.org/~kris/scaling/7.0%20Preview.pdf

を慌てて読んでみましたが、なかなかよさげで。 < 7.0R
936● ◆ANGLERlqvM :2008/04/18(金) 23:19:05 ID:C8JU4u0P0
cvsup鯖は7.0Rになってるのかな?
937root▲▲ ★:2008/04/18(金) 23:34:34 ID:???0 BE:1368353-DIA(100256)
>>936
なってますです。
938root▲▲ ★:2008/04/18(金) 23:37:27 ID:???0 BE:4104195-DIA(100256)
>>934
> ・gccが上がったせいか、オプティマイズするとofflaw.cgiが動かなかった

ものはためしということで、-O とか -O2 をはずしてみるとか。 > 某所で64bit OSで苦労しているかた
939FOX ★:2008/04/19(土) 23:21:55 ID:???0
一連の >>933 関連の作業の結果
これまで行ってきた「常連のねらーはせんぶらへ言ってちょ」が出来なくなってしまった。
ということはこれからは負荷は上がる一方でなすすべなしということっすなぁ。
みずから破綻への道を歩み始めたってことだす。
940動け動けウゴウゴ2ちゃんねる:2008/04/19(土) 23:27:21 ID:9yK7zjGV0
>>939
本当にLAが高くてやばい時は、差分取得以外を人大杉に飛ばせばいいような。
941動け動けウゴウゴ2ちゃんねる:2008/04/19(土) 23:31:59 ID:9yK7zjGV0
って専ブラも弾いちゃってダメか。
DOM Storage使ってブラウザでもログを保存するようにするとか。
http://developer.mozilla.org/ja/docs/DOM:Storage
942動け動けウゴウゴ2ちゃんねる:2008/04/19(土) 23:53:59 ID:ZaXhrfEE0
>>939
今度はその状況で「なすすべ」を考えるのがFOXの仕事だべ
943root▲▲ ★:2008/04/19(土) 23:55:44 ID:???0 BE:6567089-DIA(100256)
FreeBSD-EN-08:01.libpthread
http://security.freebsd.org/advisories/FreeBSD-EN-08:01.libpthread.asc

6.3Rのマルチスレッドは虫入りだったですか。
# 雪だるまは思い切って全部7系にするかな。
944root▲▲ ★:2008/04/19(土) 23:56:55 ID:???0 BE:5746379-DIA(100256)
あ、でも、

>>943
> On some systems, using libthr instead of libpthread, via the libmap
> configuration file libmap.conf(5), may be an acceptable workaround.

だから、大丈夫なのか。
2ch のマルチスレッドなサーバは基本的に全部 libmap.conf 書いてあるんで。
945FOX ★:2008/04/19(土) 23:57:26 ID:???0
>>942
だすなぁ

>>943
そんな流れですなぁ。
7.0R 64bitでの実験を見たらGoって感じかな。
946 株価【880】 △△ ◆cZfSunOs.U :2008/04/20(日) 00:13:46 ID:Z3OQsUu20
>>939 少なくとも,read.cgi 停止時にはサーバサイドでの dat -> html 変換は
行われなくなるわけですが,「破綻への道」というほどのインパクトがあるのでしょうか?
947FOX ★:2008/04/20(日) 00:18:27 ID:???0
うん

2ちゃんねる利用者(正確にはPV)の八割方が専ブラを使っていて
それが今後専ブラに移らないということは・・・
その比率はどんどん下がっていき、ダウン必至かと、

何言っているかわからないかもだけど、そんな感じです。
948FOX ★:2008/04/20(日) 00:20:32 ID:???0
あっと

「read.cgi は2ちゃんねるの発展のためには動いていないといけない」という
縛りがあります。人が来なくなるというか来る術がなくなるというか、


これを言わなくきゃまったくわけわかんないっすね。
949動け動けウゴウゴ2ちゃんねる:2008/04/20(日) 00:23:11 ID:u6YdqyeC0
> 2ちゃんねる利用者(正確にはPV)の八割方が専ブラを使っていて
> それが今後専ブラに移らないということは・・・
??? 使っていなくて?
950動け動けウゴウゴ2ちゃんねる:2008/04/20(日) 00:30:39 ID:vuTCIpkS0
利用者100人として
IE=係数1 専ブラ=係数0.2 として
今は8割が専ブラなら IE 1*20 専ブラ 0.2*80 で合計36の鯖稼動
今後反対になれば  IE 1*80 専ブラ 0.2*20 で合計84の鯖稼動
つーことが言いたいわけだな>>947
951FOX ★:2008/04/20(日) 00:31:43 ID:???0
>>949 「使っていて」なんです。人数比率じゃなくて、PV比率でってことなんだな。

read.html は負荷は劇的に下げる良いものなんだけど、
グーグル等検索エンジンにはいっさい載らなくなるのだ
つまりこのまま行けば人は来なくなる→負荷対策がいらなくなる
というふうに私の目的からは全くはずれてしまうんだなぁ

今までやってきたことは、クローリングにも耐えられる状況を作る
そしてクローリングしてもらう→人口増→はじめに戻る

耐えられる状況を作る方法として
サーバ等の能力を高める
常連さんは read.html を含む専ブラへ行って貰う
だったのだった
952動け動けウゴウゴ2ちゃんねる:2008/04/20(日) 00:33:35 ID:6E0oOuN20
意図的に人多すぎにしてるのはどうしてだろう。
953動け動けウゴウゴ2ちゃんねる:2008/04/20(日) 00:34:19 ID:6PCLDrzh0
>>951
えーとつまり、手段が目的化してて、本当の目的が達成されてしまうとやることがなくなると。
954 ◆NAO/2MXDEk :2008/04/20(日) 00:35:26 ID:zl9dA5Wk0
となると、高負荷に耐えられる鯖の導入と、ユーザーが使う専ブラの特典を視野に入れていかないと、
ある意味で無理が来てしまうんじゃないかな、と。
955 株価【880】 △△ ◆cZfSunOs.U :2008/04/20(日) 00:36:19 ID:Z3OQsUu20
>>951 検索エンジン対策という意味であれば,人大杉時にはロボットが read.cgi に
アクセスしてきても「人大杉」ページにリダイレクトするというのは同じなような.
ちなみに,一連の mod_rewrite 設定は,あくまで人大杉時 (read.cgi 停止時) に
read.html に振るというものであって,read.cgi 稼働時はそのまま read.cgi が動きます.
956FOX ★:2008/04/20(日) 00:37:10 ID:???0
>>955
そのとおりですよん
957 ◆NAO/2MXDEk :2008/04/20(日) 00:39:16 ID:zl9dA5Wk0
あ、専ブラを大半が使っている状況なのか・・・
958動け動けウゴウゴ2ちゃんねる:2008/04/20(日) 00:39:42 ID:hln+8YTy0
検索エンジンにはdat内容をRewriteエンジンで返すようにすれば
1-100・l50など関係なくスレ内全部がクロールされるし
read.cgi起動しまくりにもならず、いいんじゃないの
959動け動けウゴウゴ2ちゃんねる:2008/04/20(日) 00:42:18 ID:vuTCIpkS0
つまり人大杉になることがない状態では専ブラ導入のきっかけが無いわけだ
960FOX ★:2008/04/20(日) 00:43:38 ID:???0
んだな
961動け動けウゴウゴ2ちゃんねる:2008/04/20(日) 00:55:00 ID:u6YdqyeC0
>>951
おおー、わかったわかった
962 株価【880】 △△ ◆cZfSunOs.U :2008/04/20(日) 00:58:15 ID:Z3OQsUu20
要は,検索エンジンにはちゃんと引っかかるようにして,
なおかつ一般閲覧者による read.cgi 起動はできるだけ抑制できるようにしたい,
って話かな?
963動け動けウゴウゴ2ちゃんねる:2008/04/20(日) 00:58:48 ID:3DiSeD8W0
二兎追うものは一兎も得ずということ?
964FOX ★:2008/04/20(日) 01:00:22 ID:???0
>>962
かつ設備が破綻しないようにしたい
なんちゃって、

今だいたいサーバ100台でしたっけ、、
965 ◆NAO/2MXDEk :2008/04/20(日) 01:00:31 ID:zl9dA5Wk0
検索エンジンへの入り口を用意するという考え方はダメなのかしら。
966FOX ★:2008/04/20(日) 01:01:38 ID:???0
サーバ台数が増えれば機械のコストも増えるけど
それ以上にお守りが破綻すると思う。
既にという話ですが、
967動け動けウゴウゴ2ちゃんねる:2008/04/20(日) 01:07:07 ID:ChvJffoKP
サーバリフレッシュだけを見てもローテーションに要する
時間が1年を超えたらボーンか。
968 ◆NAO/2MXDEk :2008/04/20(日) 01:12:52 ID:zl9dA5Wk0
googlebotの一定確率でのキックって、既に実装されていたりしますか。
969root▲▲ ★:2008/04/20(日) 01:53:58 ID:???0 BE:4925669-DIA(100256)
秘密の花園 500番地
http://qb6.2ch.net/_500/

早速、対抗手段ですか。
970root▲▲ ★:2008/04/20(日) 01:55:08 ID:???0 BE:1460328-DIA(100256)
対抗ってのは変ですね。対応、対策?
とりあえず、従来と同じことは継続すると。
971 ◆NAO/2MXDEk :2008/04/20(日) 01:55:46 ID:zl9dA5Wk0
500よりは503返してしまった方がいい気がしました。
972 株価【850】 △△ ◆cZfSunOs.U :2008/04/20(日) 01:57:47 ID:Z3OQsUu20
う〜ん,read.html に振るのは一応管理人さんから言われてやったことなので,
どうしましょうかねぇ......
973 ◆NAO/2MXDEk :2008/04/20(日) 02:00:55 ID:zl9dA5Wk0
googlebotのみ一定で振るのは無理なんですかね。
974root▲▲ ★:2008/04/20(日) 02:01:01 ID:???0 BE:3192375-DIA(100256)
>>972
いろんな人がいろんなことを考え、
そして、それぞれの思いを込めてアクションを起こす、
ということなのではないかなと。
975root▲▲ ★:2008/04/20(日) 02:13:18 ID:???0 BE:3283294-DIA(100256)
某所のqmailが64bitでうまく動かない、は、
たぶんこれな予感。というか既に発見されている模様ですが一応、、、。

ports/118117: mail/qmail broken on amd64 -- fixed
http://www.freebsd.org/cgi/query-pr.cgi?pr=ports/118117
976root▲▲ ★:2008/04/20(日) 02:21:34 ID:???0 BE:547823-DIA(100256)
live23 で「人大杉」発動なのは、意識的なんですかね。
977root▲▲ ★:2008/04/20(日) 02:23:24 ID:???0 BE:1368735-DIA(100256)
お、直ったかも。>>976
978動け動けウゴウゴ2ちゃんねる:2008/04/20(日) 02:23:36 ID:GheuXnl80
979 株価【850】 △△ ◆cZfSunOs.U :2008/04/20(日) 02:59:03 ID:Z3OQsUu20
とりあえず私としては,「一連の作業に問題があったなら,その指示を出した人と話し合って下さい」
ということで対処したいと思います......
980動け動けウゴウゴ2ちゃんねる:2008/04/20(日) 04:05:01 ID:4SZd4HvF0
専ブラを使っている身としては、人大杉は専ブラを使う理由では全くないです。
一般のブラウザより便利ってだけ。それはread.jsでも変わらず。
実際、普及しだした頃に人大杉なんてなかったじゃん。

管理人は専ブラに特化するのを嫌っているようだけど、
少なくとも、移行を促したいなら一般ブラでの利便性を低下させるんでなくて
専ブラの存在の周知を図るべきでしょ。
981動け動けウゴウゴ2ちゃんねる:2008/04/20(日) 04:07:09 ID:j3dIzLX40
( ゚д゚ )ポカーン
982FOX ★:2008/04/20(日) 04:07:43 ID:???0
よろしくお願いします
983動け動けウゴウゴ2ちゃんねる:2008/04/20(日) 04:09:59 ID:4SZd4HvF0
>947
専ブラが便利すぎてアクセスが増える(こともある)ってのが管理人の持論だったかな。
負荷が減る分とのプラマイがどうなるかは知らないけど。
984動け動けウゴウゴ2ちゃんねる
「べき」は前提条件における、もう一方の方策との対比にかかっている。