ZDnetがロボット巡回拒否を開始

今までは無効構文の META タグにて拒否しようとしていたようだが、
効かないことが分かり、23日19時頃に robots.txt を置いた模様。

http://www.zdnet.co.jp/robots.txt

そんなことしてなんか得するのか？
あっちは商用サイトだろうに。

（；´д｀）うわゎーん

あーん

>1 なんで？・・・ますます不便になるなぁ・・・

直リンの登録をユーザーがやったらどうなるかな？

影響受けるとこって結構ある？

go awayか

>>1は何者？

巡回拒否っていっても、結局サーチエンジンの胸一つなんだよね。

もう結構まえになるけど、goo.ne.jp がディレクトリ単位での
robots.txt 参照をやめた(事実上、個人はドメイン取らない限り
gooのクロールを拒否できなくなった)こともそうなんだけど、
サーチエンジンは結局、ひとのプライバシーより
自分とこのデータベースのほうが大事なんだよな。

参照されたくないやつに参照させないためには、
インターネットに置かない。これが現実。

【例1】
この例では、すべてのウェブロボットプログラムに対して、パス名が"/cgi-bin/"、および"/tmp/"で始まるURLを探索しないように通知します。

# robots.txt for http://search.biglobe.ne.jp/
User-agent: *
Disallow: /cgi-bin/ # CGIプログラムはディレクトリ情報を公開しない
Disallow: /tmp/ 　　# 一時ディレクトリ

【例2】
この例では、Googleのウェブロボットプログラム "Googlebot"以外の探索プログラムに対しては、パス名が"/hyper_museum/"で始まるURLを探索しないように通知します。

# robots.txt for http://search.biglobe.ne.jp/
User-agent: *
Disallow: /hyper_museum/
# hyper_museumディレクトリ # Googlebot の探索のみ許可
User-agent: Googlebot
Disallow:

【例3】
この例では、すべてのウェブロボットプログラムに対してすべてのURLを探索しないように通知します。

# go away
User-agent: *
Disallow: /

詳しくは以下参照。
http://search.biglobe.ne.jp/help003.html

えーとね、多分、ニュース速報＋その他の、エイベックスコピー防止ＣＤ関連だと思うよ
これはね、エイベックスのインタビュー記事で、その中のエイベックスの人の
発言が問題になって、エイベックスから圧力がかかって
記事を訂正したんだ。で最初は黙って訂正してた（記事の更新日は最初の日のまま）
で、エイベックスが「あるところで間違った記事が流れましたが事実ではありません」
と書いたんで、不思議におもったスレ住人が、調べ始めた
そうしたら、記事がなんとなく最初に読んだのと違うって事で
誰かがグーグルのキャッシュから元記事を見つけてきた。
で、書きかえられてることがわかって、騒ぎになった。
その後、ZDnetの該当記事には、訂正しましたと書き加えられたけど
グーグルのキャッシュさえなければ、そのままだったんだろうな。

詳しくは、ここの住人に聞いてくれ。向こうからもリンク張っておいたので
相互リンク
http://kaba.2ch.net/test/read.cgi/news2/1016695040/

記事書くｻｲﾄがrobotを嫌がるのは変な話だね。
AVEXの圧力でも掛かったかな？

>>15
だとすればｱﾍﾞｯｸｽらしい話だが(w)

ｴｲﾍﾞ糞最悪だな。
氏ね。

市ね

アベック巣
孫
胸を
都地もと

今見たら robots.txt 消えてるYO!

>>19
ぜーでーねっと鼻が効くね

>>10
や。robots.txt はもともとドキュメント根の直下に置くのがルールなのよ。
使えない人は META タグ使え。という。（ま、あくまで協定レベルで拘束力はないけど）
POSTメソッドで生成する、パスワード制限をかける、と回避する方法はなくもない。

「青少年有害社会環境対策基本法に断固反対！」
テレビ局への署名を募集しています。
目標は今日明日中に300人。
集まった署名は各テレビ局に送ります。
＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝
↓署名の参加方法
[email protected]宛てに、自分のメールアドレス
（なるべくプロバイダのアドレス）と本名を書いた
メールを送ってください。タイトルは無くていいです。
＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝
申し訳ありませんが、添付ファイルの付いたものは削除します。
お願いします。
また、この書き込みを色々なスレッドに貼り付けてくれると
嬉しいです。

>>22

hantai_syomei　じゃなくてhentai_syomeiでしょ？

>22,>23
つーか、２２おめーなにもんだ？
匿名メールで素性も明かさずに氏名とメアドを収集？
ぜってー、怪しいぞ。メアド業者かなにかか？
それとも推進派か？

>>24
おい、23だが22の糞と一緒にｽﾝﾅ

ｽﾏｿ、漏れの書き方が悪かった。
23を悪者とは思っていないし、いっしょにしたつもりも無かった。
漏れとしては、23のカキコは22をバカにしている意味にとったのだ。
で、23は自分と同じ側に思えてああいう書き方になってしまったんだが
旨く、意図が表現できてなかった。

ｽﾏｿかった。

>>22はスパマーの罠
気をつけろ！

■■■■■■趣旨要約テンプレ( ﾟДﾟ) ﾃﾝﾌﾟﾗｯ!■■■■■■

ポ前ら、ちょっと聞いてください( ﾟДﾟ) ﾎﾟﾏｴﾗｯ!
人の噂が大好きで、たまには政治や他人を批判してみて、そんでもってちょっぴりエロス人、
そんなごく普通の生活を送る善良なポ前ら市民にとって困った法律が成立しそうです( ﾟДﾟ) ﾋｰ

その名は、「対民監視法案」。提出したのはお騒がせマキコの夫( ﾟДﾟ) ﾎﾟｯﾄ

ポ前らの生活や２ｃｈを含む身の回りのメディアを国が監視して、報道・作品・政治思想・映画、
風俗系の淫猥記事、AVなどありとあらゆる物を規制しようという法律((((( ;ﾟДﾟ))))) ｶﾞｸｶﾞｸﾌﾞﾙﾌﾞﾙ
成立すると、エロビ、エロゲーは言うに及ばず、噂真や２ちゃんねる、ドラ○もんの
「いや〜んのびたさんｴｯﾁ」ですら見られなくなってしまいます( ﾟДﾟ) ｲﾔｲﾔ

そこでポ前らの無駄なエネルギーを結集してこの天下の悪法を阻止しませんか( ﾟДﾟ) ｼﾏｾﾝ?
http://members.tripod.co.jp/seikanhou_toshi/
http://members.tripod.co.jp/seikanhou_toshi/index2.html

↓現在祭り中のスレ( ﾟДﾟ) ﾜｼｮｰｲ
★政府の法案によってHシーンやポルノが禁止へ★
http://www2.bbspink.com/test/read.cgi/erocomic/1016540467/l50
【政治】青少年有害社会対策法について
http://news.2ch.net/test/read.cgi/newsplus/1017083795/

454 名前：名無しさん＠お腹いっぱい。 投稿日：02/03/27 01:11 ID:+CDVHXVg
2chの皆様へ
「青少年有害社会環境対策基本法に断固反対！」
テレビ局への署名を募集しています。
目標は今日明日中に300人。
集まった署名は各テレビ局に送ります。
＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝
↓署名の参加方法
[email protected]宛てに、自分のメールアドレス
（なるべくプロバイダのアドレス）と本名を書いた
メールを送ってください。タイトルは無くていいです。
＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝
申し訳ありませんが、添付ファイルの付いたものは削除します。
お願いします。
また、この書き込みを色々なスレッドに貼り付けてくれると
嬉しいです。

　　↓

件名　著名について
本文　あなたが名簿業者ではないことを約束してくれたら
　　　著名をします。
　　　返事を待っています。

　　↓

件名　青環法反対署名責任者です。
本文　こんにちは。メール有難うございました。
　　　青少年有害社会環境対策基本法反対署名　
　　　テレビ局署名責任者　Yu-Ichi　こと*******と申します。
　　　もちろん名簿業者等ではありません。あくまでも個人としての署名です。

　　　もし賛同いただけるのならば、以下のアドレスに本名を送って下さい。
　　　********@***.nifty.com　

　　　それでは。

彼女は本名と生メールアドレスを公開した。

>>28-29はスパマーの罠
連絡を取るとメアドが採取される罠。きをつけろ！

>>10
当然だね。
Waybackmachineの例を出すまでもなく。

ちょっと変わったね。

gooのロボットはCGIを使ってると全て取ってこようとする馬鹿な仕様でうざい。
だからうちのサイトではgoo.ne.jpからのアクセスは全て403。

あ