1. メモ帳日記 >
  2. Web >
  3. LiteFinder

メモ帳日記

日記書いたりメモ書いたり

2007年 11月 23日(勤労感謝の日 大安 小雪

LiteFinder

LiteFinder とかいう bot がやってきた。User-Agent 名は"Mozilla/5.0 (compatible; LiteFinder/1.0; +http://www.litefinder.net/about.html"。久方ぶりに相当にたちの悪い野郎だ。とりあえずこんな感じ。

  • 1秒間隔のアクセスは当たり前。
  • robots.txt の内容は完全無視。
  • URI の解析がまともにできていない。

というわけで速攻アク禁にしましたとさ。

ただ、前から思っていたのが、Googlebot の標準でのクロール動作もなんか品がないというか何というか。まあ印象があんまり良くない。クロールが一定の時間に集中するのがいまいち気にくわないかな。もう少し分けてクロールして欲しいんだが。うーん。どうしよう。