同人サイトのロボ避けアク解について 4

一般人や版元に見つかると、何かとﾏｽﾞｰなことが多い同人サイト運営。
なるべくひっそり楽しむために、.htaccessやrobots.txt等を用いた
検索避け・アクセス解析・アクセス制限などについて語り合いましょう。

robotx.txtや.htaccessを使いたいなら有料池
■同人OK鯖総合スレまとめ
ttp://f43.aaa.livedoor.jp/~sils/

関連リンク
■ロボテキについて（※英文）
ttp://www.robotstxt.org/wc/norobots.html
■.htaccessテンプレ
ttp://www.ii-park.net/~nanashi/htaccess2.html
■ドットHTアクセス メーカー
ttp://html-time.com/tool/htaccess_maker.htm
■裏サイトオーナーのためのSmall Tips
ttp://sp999.oheya.jp/tips/
■禿げしくガイシュツでうんざりしている質問のＦＡＱ
（2ch web制作管理板 ロボット型検索エンジンスレＦＡＱ集より）
ttp://f3.aaa.livedoor.jp/~zwgxodue/gaishutu.html
■ちょっとまったFC2ブックマーク（問題と対処）
ttp://www.geocities.jp/no_no_bookmark/
■PHPであれこれ。（FC2ソーシャルブックマークに関してのスクリプト）
ttp://www.geocities.jp/moyashi_de_go/

前スレ
http://changi.2ch.net/test/read.cgi/doujin/1196876804/

>>1
乙〜

>>1
お疲れ様でした。

>>1
乙なんてなんたらかんたら
最近無自覚にPathtraqインストールしてアクセスしてた人がいた
前スレのおかげで弾けてたよありがとう

乙だけどここのリンク先もう役に立たないみたい

■.htaccessテンプレ
ttp://www.ii-park.net/~nanashi/htaccess2.html

■裏サイトオーナーのためのSmall Tips
ttp://sp999.oheya.jp/tips/

>>1
乙です

百度死ね

>>1
おつです！

一乙

>>1乙

今日は秘密やが重い。

1乙

■同人OK鯖総合スレまとめ

これはもう情報が古すぎて
テンプレからは外した方がいいかもしれないとオモ

すみません
lint避けるにはどう書けばいいのでしょう？

deny from lint

PCサイトだけど携帯で閲覧できるなら別にいいか、と放置してたんだけど
とある携帯訪問者が、その人の携帯のみではうちのサイトが閲覧できないらしく
PCサイト変換サイトから来るんだけど、そのサイトからくると
いつも一緒にグーグルボットを連れてくる
最初は気のせいか？って思ってたけど、変換サイトの後に絶対くっついてる
グーグルボット弾いてるから入ってくることはないんだけど
毎回毎回なのでウザくて仕方ないのでその変換サイト弾いたよ
別の変換サイト使ってくれ

>>14
それ、Google Wireless Transcoder？
自分もうざいと思ってた。
IPがコロコロ変わるからUAで弾けばいいのかな、
でもせっかくの閲覧者がなあ…とか悩み中。

携帯でアクセスするようなのはＤＱＮだからイラネ

>>15
いや、クローラーなんだ
crawl-66-249-73-162.googlebot.com

海外IPを全部弾いてる

鯖の生ログで、エラーログの方には99.153.216.189だの99.31.233.154だの
海外IPが乗っているのに、アクセスログの方を同じIPで検索しても引っかからない
通常は403返した時もアクセスログに乗るはずなのに

これは一体どう考えればいいんだ？

>>17
ごめん
pc変換サイトがグーグルワイヤレスなの？って意味ですた

>>19
いや、ぐるっぽとかいうサイト

Deny from 74.125.0.0/16　って　74.125.74.154　も含まれるよね？
Google Wireless Transcoder弾こうと思って自分でアクセスしてみたら
74.125.0.0/16で弾けなくて74.125.74.154だと弾ける。なんでだ？

何かこんなんができてた

原寸画像検索
ttp://k52.org/gensun/

キーワード検索は可・画像は不可にしたいんだけど
今のサイトはMETAタグしか使えなくて
それだとYahooの画像検索は拒否できないようで……引っ越すかなぁ

こんなホストからアクセスあった
button-kokan.com

ぐぐったらここ？
ttp://www.aboutus.org/Button-kokan.com

バナーエクスチェンジなんていらないんですけど

s53.coreserver.jpからアクセスがあるんだが

ぐぐってもWebサービスも何も引っかからない
もちろんリンクを貼られているわけでもない（アカウント名.s53.coreserver.jpになってない）

レン鯖から直接アクセスされるなんてことがあるのか？

それたぶんGENOチェッカー
GENOウィルスのせいで携帯からアクセス増えたけど
弾いてるから申し訳ない感じだ。

自分も聞きたい事があるのに、規制されて
携帯からで思うように投稿できない。早くても来年5月って酷い…

日本以外のアクセスを弾きたい時ってどう記述すればいいのかな
まとめサイト便利だったのに無くなってて困ってる…
逆に日本だけ許可するようにこんな感じ？

order deny,allow
allow from jp
deny from all

>>24だが

>>25
>それたぶんGENOチェッカー
マジでか、ビビって悪禁しちまった
ウチも携帯弾いてるから悪いことしたな

>>26
日本IPのみallowにしたらいい
リスト公開してるサイトあったよ

>>26
order allow,deny
allow from .jp
deny from env=shutout

うちはこう書いてる
.jpでも弾きたいところをenv=shutoutで指定して更に弾く
.jpじゃない日本のISP（YBBとか）はallow fromで許可を出す
というやりかた

「各国アクセス許可/拒否リスト」でぐぐると、allow記述済みのリスト出てくるよ。
自分は定期的にチェックして、IP羅列してる。
28も書いてるけど、弾きたいIPが追記できる
「Order Allow,Deny」
の方がいい。

レストン！ぐぐってくる

28だけどenv=shutoutじゃないと弾けないみたいに書いてしまった
deny fromでIPやリファを追記しても弾けます、ごめん

上でも出てたGENOチェッカーだけど
弾いているのにサイトをチェッカーにかけると安全度0%と出る…
あてにしないほうがいいと言われてるけど本当にあてにしないほうがいい

アクセス解析をみたら、HTML Ggtというのがありました。
ググってみたのですが、メソッドがどうとか記述に関することのようで、
具体的に誰が何をしたらこう出るのかがわかりませんでした
これはロボットなのでしょうか？

>>32
ttp://www.geocities.jp/mieki256jp/software/m256morehtmlgeteasyedit.html
コレのことかなーと思ってるけど確かめてない

>>22
これ、はてな使ってるようだからはてな弾けば済む話じゃね

つか、METAしか使えないような鯖使ってるんじゃいろいろ諦めるしかないぞ
引っ越しな

はてなは弾いてる
使ってるのはYahoo画像検索のようだけど

何かmsnbotが毎日特定の単語（凄い一般的な英単語）の検索結果ページから来るぽ
良く分からん