【p2】PHPでつくった2ch viewer【part10】

ちょっと検索して調べてみた。

・ロボットよけにはrobot.txtとrobots.txtの二種類が存在することがわかった。
　http://home.a03.itscom.net/tsuzu/programing/etc01.htm
　http://res9.7777.net/CGI-BBS/counter/counter_misc/20010209185435.shtml

・robot(s).txtは鯖のルートに置かないと意味がないらしい。
　http://www.juraihelm.com/NNR/
　http://www.salut.ne.jp/wmh/qbox/a047/

・.htaccessの使用は鯖のレスポンスを悪くするので、Apcheの基本ディレクトリ制御
　を利用するほうが望ましいらしい。
　http://httpd.apache.org/docs-2.1/ja/howto/htaccess.html

・その他
　「はてなアンテナ」よけ
　http://alisato.parfait.ne.jp/diary/200403a.html