07/06/23 17:51:53 xHL0XnB30
百度が分からなくてググってみた。
見つけて自サイト検索したけど出なかった。
そういやうちは.htaccessでspiderと名の付くUAは全部弾いてた。
昨日酢単フォード大学からheritrixとかいうロボットが来ていた。
heritrixはロボテキに従うと解説にあったけど
ロボットが来たページはロボテキで弾いていたフォルダのページだった。来んなよ。
07/06/23 17:51:53 xHL0XnB30
百度が分からなくてググってみた。
見つけて自サイト検索したけど出なかった。
そういやうちは.htaccessでspiderと名の付くUAは全部弾いてた。
昨日酢単フォード大学からheritrixとかいうロボットが来ていた。
heritrixはロボテキに従うと解説にあったけど
ロボットが来たページはロボテキで弾いていたフォルダのページだった。来んなよ。