さくらインターネット 質問にマジレスするスレ Part15at HOSTING
さくらインターネット 質問にマジレスするスレ Part15 - 暇つぶし2ch116:名無しさん@お腹いっぱい。
08/03/22 10:16:23 0
>>88=84 遅ればせながら蛇足まで
検索エンジンからの(おそらくクローラの)アクセスを弾きたいと言うことなのだと思いますが、
Host name や IP address だけで弾こうとしても弾ききれず抜けが発生します

理由は、検索エンジン用クローラは日増しに悪質かつ巧妙になっているためで、
特に酷いものになると、IP address も User agent も検索エンジンと関係が無いような、
一般的なアクセス元やブラウザのように見せかけているものがあるので注意が必要です

なお、検索エンジンの探索のたぐいの通信の全てを弾きたいという意図もあるのでしたら、
検索エンジン製のツールバーや各種ツール(Google Desktop など)もクローラと同じ役割を
担当していますので、検索エンジンに関連する IP address だけでは弾ききれません

なぜなら、該当するツールバー類は任意のユーザーが使用しているだけなので、
検索エンジンとはまったく関係していない任意の IP address からアクセスがあるためです
このため、User agent での deny も併用してやっとのことで
検索エンジン関連のほぼ全てのアクセスを弾くことができるのが現状です


次ページ
続きを表示
1を表示
最新レス表示
レスジャンプ
類似スレ一覧
スレッドの検索
話題のニュース
おまかせリスト
オプション
しおりを挟む
スレッドに書込
スレッドの一覧
暇つぶし2ch