Yeti/0.01(yetibot@naver.com) naver.comの新たなクローラ(?)が登場
2007.04.01
naver.com のロボットと名乗る新手のクローラがやって来ました.
User-Agent は次の通り.
Yeti/0.01 (nhn/1noon, yetibot@naver.com, check robots.txt daily and follows it「robots.txtを毎日チェックして従うよ」とUser-Agentに書いてあります.だいぶ下手にでてきました.今までの傍若無人ぶりを反省したのでしょうか.access_logを調べると確かに,robots.txtをGETしてるようです. でも,4月1日の24時間だけで robots.txt を96回もGETしてます.そりはGETし過ぎです…. まさかエイプリルフールの冗談なのだろうか? * * * 今までのnaver.comのロボットの行儀悪さを考えると,すぐには信用できない.しばらく,アクセス遮断して様子を見るとこにしました.
SetEnvIf User-Agent ^Yeti badrobot上記設定を加え,apacheをreloadしました.DoS攻撃/DoSアタック対策 : User-agent によるアクセス制御/アクセス拒否参照. アクセス元のIPアドレスは220.95.235.{165,166,176,177}となってました.逆引きしてもnaver.comとは出ないので,もしかしたら勝手にnaver.comのロボットを名乗っているだけかもしれません. -- スケーラブルWebサイト まるごとJavaScript & Ajax(エージャックス)!(vol.1)
カテゴリー:技術情報メモ