同人サイトのロボ避けアク解について 2at DOUJIN
同人サイトのロボ避けアク解について 2 - 暇つぶし2ch964:t
07/11/16 07:00:41 AoxwJVeK0
HTTP_USER_AGENTMozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322; .NET CLR 2.0.50727; .NET CLR 3.0.04506.30; msn Optimized IE build03;JP)

msn Optimized IE build03;JPてことはロボかね?

965:ロボ ◆nTIstM8Nck
07/11/16 14:43:15 aWIRPMBY0
UserAgent : Mozilla/5.0 (compatible; MJ12bot/v1.2.1; URLリンク(www.majestic12.co.uk))

おもいっくそbotって書いてあるって事はそうなんだよな?今日来てた。初めて見た。

966:炉ボ
07/11/16 15:32:32 nkpcqXOr0
>>965
あー、それうちにも来てた。
忍者では拾われていていなかったけど、鯖のアク解で解った。

967:ロボ
07/11/19 19:10:44 u8lt/iAB0
とりあえず.htaccess使える人は検索避け支援にあるリストの追加をおすすめ
たいていはそれでなんとかなる

968:ロボ
07/11/21 02:42:44 Gqmrq1G60
cgiの解析を外部ファイルで記述してるんだが
そのファイルのみ覗いてる人が数人いる
これはロボが悪さしてるのかな?気持ち悪いが大手なんで弾きづらい

969:ロボ ◆nTIstM8Nck
07/11/21 09:32:24 aTCs8qgS0
>968
解析部分のジャバスクを外部にしてるが
ブラウザの仕様でリンク元がその外部ファイルになることがある
所謂誤爆じゃね?

970:ロボ
07/11/21 10:56:24 j0n/TSNh0
ところでジャヴァスクって何?コーヒー学校?

971:ロボ
07/11/21 11:32:35 bP5R+9R50
コーヒー学校わーおもしろーい!バロス腹いてえ!^^^^^^

972:ロボ
07/11/21 23:16:40 Gqmrq1G60
誤爆かーなら問題なさそうだな>969ありがとう
毎回必ず誤爆している人がいるが気にしないでおくよ

973:ロボ
07/11/24 01:48:23 t7Yb2K0P0
誤爆もあると思うが
鯖によってはlogファイルがブラウザから見えることがあるから注意
ぐぐるにキャッシュされてることもある
変なホストやUserAgent調べるのにぐぐったら
アク解のログがずらずら出てきた

974:ロボ
07/11/24 03:02:55 4ryfxAsR0
>>973
968の外部ファイルってたぶんjsだと思うんだけど、ログとは違うでそ。
jsなら見ようと思えば、いくらでも見えるよ。
お勧めアク解スレでも、昔話題になったけど
ぐぐるに引っかかる解析ログは、パスがかかってない事が多いよ。
自分も解析を外部ファイルにしてた時、必ず同じ人がjsの誤爆してった。

975:・
07/11/25 23:30:00 51d9Z0hn0


976:ロボ ◆IM4x4W1tyo
07/11/30 19:01:14 mEwculDg0
なんかヤフって行儀悪くなってる?
今までひろわれてなかったアドレスが拾われているようだ…。
ヤフブクマの足跡があるけどそのせいなのかたまたま同時期だったのか。
入れかけてやめてあった.htaccessを早くやらなきゃだめだなあ。

977:ロボ ◆nTIstM8Nck
07/11/30 19:55:23 qW/tJrTLO
同じくヤフにいきなり拾われるようになった
うち登録されてないしここでも何度か言われてるからブクマは関係ないと思う
被リンク数が多いと拾われやすいって話もあったよね
でも被リンクもブクマも変化無かったのに急に掛かるようになったから違う理由かも

それよりいまだに百度からキャッシュが消されないのが嫌だ
403じゃなく404返してみたが意味ないみたいだ('A`)

978:ロボ
07/12/01 11:21:02 VIEE/UWC0
ヤフ、ブクマは関係ないっぽい。
うちはブクマされてるインデックスは拾われてないのに
別のページ(ブクマ無し)が拾われてる

.htaccessのおかげで中身は拾われてないから
URLで検索でもしない限り出てこないんで、別にいいや。
きっとヤフがバカなだけだと思っておく。

979:ロボ
07/12/02 08:00:58 eAbYhYOU0
同じくMETAタグとロボテキ仕込んでるのにヤフに急にトップページ拾われるようになったからここ来てみた
トップ以下は拾われてないようだしリファラで弾いてるので
とりあえずは何も知らない人がコピペしてまで入ってくることはないと思いたいけど、どうなってんだ

980:ロボ
07/12/02 08:58:03 8qC52HwH0
どうなってんだってヤフーの仕様が変わっただけだろ
バイズと同じ中国企業なんだから騒ぐだけ無駄

981:ロボ
07/12/02 10:09:00 wpwB9mlF0
>>980
もし仕様変更があったならそのソースを知りたい
そう思うもんだ

騒ぐだけ無駄って思う奴がここにいる事が自体が無駄だし意味不明

982:ロボ
07/12/02 10:22:07 NPHXpBeT0
自分は逆に消えた。ずっとインデックスされて、どうにもならなかったのに…
ブクマは関係ないと思うけど、リンク先は関係してかもしれない。
某サイトに2つサイトをリンクされてたんだけど、そこが閉鎖したら
2つとも消えたんだよね。偶然かな?

983:ロボ
07/12/02 10:44:16 8qC52HwH0
>>981
URLリンク(diamond.jp)
URLリンク(www.misao.gr.jp)

984:ロボ
07/12/02 21:08:43 Ry3c4qtp0
>>981
URLリンク(searchblog.yahoo.co.jp)


最新レス表示
レスジャンプ
類似スレ一覧
スレッドの検索
話題のニュース
おまかせリスト
オプション
しおりを挟む
スレッドに書込
スレッドの一覧
暇つぶし2ch