04/06/04 11:08
>588
859 :名無しさん@お腹いっぱい。 :04/03/17 07:31
兄やに感謝を込めて
多分robots.txtについて質問する人がでると思うので、兄やからのレスを
貼っておきます。
<!--以下が返信-->
robots.txtをおくことは可能です。
たとえば、お客様の作成されたサイト全体でロボットのアクセスをを排除したい場合には、
public_htmlの中におくのが通例です。(ただし解釈は相手の自動巡回・収集ソフトによります)
robots.txt以外でも、htmlや画像ファイルといった、一般に公開する目的のファイル以外を
置いていただくことにも制限はございません。
今後とも西院ネットワークスをよろしくお願いいたします。
<!--以上-->
865 :名無しさん@お腹いっぱい。 :04/03/17 17:35
>>859
robots.txtはサーバのルートに置かないと効果がないぞ
大丈夫か兄や…
866 :名無しさん@お腹いっぱい。 :04/03/17 19:33
>865
public_htmlにつっこんでるけど動いてる。
前に.htaccessであらゆるロボを弾いてたのに
ネイバーにだけ拾われて、試しにrobots.txt突っ込んだら反映されたよ。