ZDnetがロボット巡回拒否を開始

このエントリーをはてなブックマークに追加
1名無しさん
今までは無効構文の META タグにて拒否しようとしていたようだが、
効かないことが分かり、23日19時頃に robots.txt を置いた模様。

http://www.zdnet.co.jp/robots.txt
2名無しさん@お腹いっぱい。:02/03/24 16:48 ID:m2XQKwCx
そんなことしてなんか得するのか?
あっちは商用サイトだろうに。
3名無しさん@お腹いっぱい。:02/03/24 17:17 ID:???
(;´д`)うわゎーん
4名無しさん@お腹いっぱい。:02/03/24 17:37 ID:???
あーん
5名無しさん@お腹いっぱい。:02/03/24 19:30 ID:???
>1 なんで?・・・ますます不便になるなぁ・・・
6名無しさん@お腹いっぱい。:02/03/24 21:08 ID:???
直リンの登録をユーザーがやったらどうなるかな?
7名無しさん@まるち板:02/03/25 00:18 ID:n5VFeHtT
影響受けるとこって結構ある?
8一條戻橋 ◆KyotoVLI :02/03/25 00:51 ID:???
go awayか
9名無しさん@お腹いっぱい。:02/03/25 01:48 ID:eOci5ZEo
>>1は何者?
10名無しさん@お腹いっぱい。:02/03/25 02:08 ID:???
巡回拒否っていっても、結局サーチエンジンの胸一つなんだよね。

もう結構まえになるけど、goo.ne.jp がディレクトリ単位での
robots.txt 参照をやめた(事実上、個人はドメイン取らない限り
gooのクロールを拒否できなくなった)こともそうなんだけど、
サーチエンジンは結局、ひとのプライバシーより
自分とこのデータベースのほうが大事なんだよな。

参照されたくないやつに参照させないためには、
インターネットに置かない。これが現実。
11名無しさん@お腹いっぱい。:02/03/25 02:19 ID:???
【例1】
この例では、すべてのウェブロボットプログラムに対して、パス名が"/cgi-bin/"、および"/tmp/"で始まるURLを探索しないように通知します。

# robots.txt for http://search.biglobe.ne.jp/
User-agent: *
Disallow: /cgi-bin/ # CGIプログラムはディレクトリ情報を公開しない
Disallow: /tmp/   # 一時ディレクトリ

【例2】
この例では、Googleのウェブロボットプログラム "Googlebot"以外の探索プログラムに対しては、パス名が"/hyper_museum/"で始まるURLを探索しないように通知します。

# robots.txt for http://search.biglobe.ne.jp/
User-agent: *
Disallow: /hyper_museum/
# hyper_museumディレクトリ # Googlebot の探索のみ許可
User-agent: Googlebot
Disallow:

【例3】
この例では、すべてのウェブロボットプログラムに対してすべてのURLを探索しないように通知します。

# go away
User-agent: *
Disallow: /



12名無しさん@お腹いっぱい。:02/03/25 02:20 ID:???
詳しくは以下参照。
http://search.biglobe.ne.jp/help003.html
13名無しさん@お腹いっぱい。:02/03/25 04:06 ID:v8y9TcGA
えーとね、多分、ニュース速報+その他の、エイベックスコピー防止CD関連だと思うよ
これはね、エイベックスのインタビュー記事で、その中のエイベックスの人の
発言が問題になって、エイベックスから圧力がかかって
記事を訂正したんだ。で最初は黙って訂正してた(記事の更新日は最初の日のまま)
で、エイベックスが「あるところで間違った記事が流れましたが事実ではありません」
と書いたんで、不思議におもったスレ住人が、調べ始めた
そうしたら、記事がなんとなく最初に読んだのと違うって事で
誰かがグーグルのキャッシュから元記事を見つけてきた。
で、書きかえられてることがわかって、騒ぎになった。
その後、ZDnetの該当記事には、訂正しましたと書き加えられたけど
グーグルのキャッシュさえなければ、そのままだったんだろうな。
1413:02/03/25 04:11 ID:v8y9TcGA
詳しくは、ここの住人に聞いてくれ。向こうからもリンク張っておいたので
相互リンク
http://kaba.2ch.net/test/read.cgi/news2/1016695040/
15 ◆ZYVE00Yg :02/03/25 04:59 ID:???
記事書くサイトがrobotを嫌がるのは変な話だね。
AVEXの圧力でも掛かったかな?
16名無しさん@お腹いっぱい。:02/03/25 09:07 ID:???
>>15
だとすればアベックスらしい話だが(w)
17名無しさん@お腹いっぱい。:02/03/25 14:06 ID:???
エイベ糞最悪だな。
氏ね。
18名無しさん@お腹いっぱい。:02/03/25 20:37 ID:J3kaq5ax
市ね

アベック巣

胸を
都地もと
19名無しさんに接続中…:02/03/26 23:27 ID:2txFI1ym
今見たら robots.txt 消えてるYO!
20名無しさん@お腹いっぱい。:02/03/26 23:41 ID:YlNixw+u
>>19
ぜーでーねっと鼻が効くね
21名無しさん@お腹いっぱい:02/03/27 00:48 ID:???
>>10
や。robots.txt はもともとドキュメント根の直下に置くのがルールなのよ。
使えない人は META タグ使え。という。(ま、あくまで協定レベルで拘束力はないけど)
POSTメソッドで生成する、パスワード制限をかける、と回避する方法はなくもない。
22名無しさん@お腹いっぱい。:02/03/27 01:26 ID:B5tJcEBL
「青少年有害社会環境対策基本法に断固反対!」
テレビ局への署名を募集しています。
目標は今日明日中に300人。
集まった署名は各テレビ局に送ります。
========================
↓署名の参加方法
[email protected]宛てに、自分のメールアドレス
(なるべくプロバイダのアドレス)と本名を書いた
メールを送ってください。タイトルは無くていいです。
========================
申し訳ありませんが、添付ファイルの付いたものは削除します。
お願いします。
また、この書き込みを色々なスレッドに貼り付けてくれると
嬉しいです。

23名無しさん@お腹いっぱい。:02/03/27 01:38 ID:???
>>22

hantai_syomei じゃなくてhentai_syomeiでしょ?
24名無しさん@お腹いっぱい。:02/03/27 02:38 ID:???
>22,>23
つーか、22おめーなにもんだ?
匿名メールで素性も明かさずに氏名とメアドを収集?
ぜってー、怪しいぞ。メアド業者かなにかか?
それとも推進派か?
25名無しさん@お腹いっぱい。:02/03/27 02:41 ID:???
>>24
おい、23だが22の糞と一緒にスンナ
2624:02/03/27 06:41 ID:???
スマソ、漏れの書き方が悪かった。
23を悪者とは思っていないし、いっしょにしたつもりも無かった。
漏れとしては、23のカキコは22をバカにしている意味にとったのだ。
で、23は自分と同じ側に思えてああいう書き方になってしまったんだが
旨く、意図が表現できてなかった。

スマソかった。
27名無しさん@お腹いっぱい。:02/03/27 11:22 ID:???
>>22はスパマーの罠
気をつけろ!
28名無しさん@お腹いっぱい。:02/03/27 21:26 ID:al+wa7xC
■■■■■■趣旨要約テンプレ( ゚Д゚) テンプラッ!■■■■■■

ポ前ら、ちょっと聞いてください( ゚Д゚) ポマエラッ!
人の噂が大好きで、たまには政治や他人を批判してみて、そんでもってちょっぴりエロス人、
そんなごく普通の生活を送る善良なポ前ら市民にとって困った法律が成立しそうです( ゚Д゚) ヒー

その名は、「対民監視法案」。提出したのはお騒がせマキコの夫( ゚Д゚) ポット

ポ前らの生活や2chを含む身の回りのメディアを国が監視して、報道・作品・政治思想・映画、
風俗系の淫猥記事、AVなどありとあらゆる物を規制しようという法律((((( ;゚Д゚))))) ガクガクブルブル
成立すると、エロビ、エロゲーは言うに及ばず、噂真や2ちゃんねる、ドラ○もんの
「いや〜んのびたさんエッチ」ですら見られなくなってしまいます( ゚Д゚) イヤイヤ

そこでポ前らの無駄なエネルギーを結集してこの天下の悪法を阻止しませんか( ゚Д゚) シマセン?
http://members.tripod.co.jp/seikanhou_toshi/
http://members.tripod.co.jp/seikanhou_toshi/index2.html

↓現在祭り中のスレ( ゚Д゚) ワショーイ
★政府の法案によってHシーンやポルノが禁止へ★
http://www2.bbspink.com/test/read.cgi/erocomic/1016540467/l50
【政治】青少年有害社会対策法について
http://news.2ch.net/test/read.cgi/newsplus/1017083795/
29名無しさん@お腹いっぱい。:02/03/27 21:27 ID:al+wa7xC
454 名前:名無しさん@お腹いっぱい。 投稿日:02/03/27 01:11 ID:+CDVHXVg
2chの皆様へ
「青少年有害社会環境対策基本法に断固反対!」
テレビ局への署名を募集しています。
目標は今日明日中に300人。
集まった署名は各テレビ局に送ります。
========================
↓署名の参加方法
[email protected]宛てに、自分のメールアドレス
(なるべくプロバイダのアドレス)と本名を書いた
メールを送ってください。タイトルは無くていいです。
========================
申し訳ありませんが、添付ファイルの付いたものは削除します。
お願いします。
また、この書き込みを色々なスレッドに貼り付けてくれると
嬉しいです。

  ↓

件名 著名について
本文 あなたが名簿業者ではないことを約束してくれたら
   著名をします。
   返事を待っています。

  ↓

件名 青環法反対署名責任者です。
本文 こんにちは。メール有難うございました。
   青少年有害社会環境対策基本法反対署名 
   テレビ局署名責任者 Yu-Ichi こと*******と申します。
   もちろん名簿業者等ではありません。あくまでも個人としての署名です。

   もし賛同いただけるのならば、以下のアドレスに本名を送って下さい。
   ********@***.nifty.com 

   それでは。

彼女は本名と生メールアドレスを公開した。
30名無しさん@お腹いっぱい。:02/03/28 08:30 ID:DMdaL2ea
>>28-29はスパマーの罠
連絡を取るとメアドが採取される罠。きをつけろ!
31名無しさん@お腹いっぱい。:02/03/31 22:06 ID:???
>>10
当然だね。
Waybackmachineの例を出すまでもなく。
32名無しさん@お腹いっぱい。:02/05/16 21:51 ID:r1ET3bR1
ちょっと変わったね。
33名無しさん@お腹いっぱい。:02/05/16 23:57 ID:r4pFEXTz
gooのロボットはCGIを使ってると全て取ってこようとする馬鹿な仕様でうざい。
だからうちのサイトではgoo.ne.jpからのアクセスは全て403。
34名無しさん@お腹いっぱい。