同人サイトのロボ避けアク解について 4at 2CHBOOK
同人サイトのロボ避けアク解について 4 - 暇つぶし2ch362:スペースNo.な-74
11/10/15 10:54:37.79
>>361
ブクマじゃなくて、
別鯖経由でアクセスできるところじゃね?
プロバでアク禁されてるときにそこ通せば見れる、みたいな。

363:スペースNo.な-74
11/10/15 11:30:13.80
>>362
ありがとう
助かりました

364:スペースNo.な-74
11/10/15 19:52:58.60
非同人サイトですが

URLリンク(hogehoge.com)     ←検索されたい
URLリンク(hogehoge.com) ←検索されたい
URLリンク(hogehoge.com) ←検索されたい
URLリンク(hogehoge.com) ←ロボ避けしたい

こういう場合、robots.txtはルートディレクトリでないといけないから使えないんですよね?
.htaccessをsub3フォルダに入れればsub3以下は避けてくれて
sub3以外は今まで通り普通に拾われますか?

一応sub3フォルダのファイルのヘッダには
<meta NAME="ROBOTS" CONTENT="NOINDEX,NOFOLLOW,NOARCHIVE">
<meta NAME="GOOGLEBOT" CONTENT="NOINDEX,NOFOLLOW">
入れましたが、ちょっと不安なのです

掲示板に広告書き込まれるので見つけ次第消して
NGリストに追加してるけど、いたちごっこなので
掲示板だけロボ避けしたいという事情です

365:スペースNo.な-74
11/10/15 19:56:53.61
User-agent: *
Disallow: /sub3/

366:364
11/10/15 20:05:28.52
>>365
特定のディレクトリを避ける方法があったんですね!
ありがとうございます
早速使います

367:スペースNo.な-74
11/11/16 22:02:37.84
最近話題のニューフェイス
mobile.kks.yahoo.co.jp

368:スペースNo.な-74
11/11/24 15:19:44.18
秘密屋が落ちてる。
最近、管理人さんの姿が見えない。

369:スペースNo.な-74
11/11/29 23:19:15.31
Twitterで友人にURLを伝えるような感覚で気になったWebのURLをコメント付きで投稿し、
情報共有できるソーシャルサービス。
URLリンク(jukepage.com)

拒否する方法が見つからない

370:スペースNo.な-74
11/11/30 00:04:59.66
ちょ


最新レス表示
レスジャンプ
類似スレ一覧
スレッドの検索
話題のニュース
おまかせリスト
オプション
しおりを挟む
スレッドに書込
スレッドの一覧
暇つぶし2ch