Crawler-Alert：クローラーが訪れたらメールでお知らせ

Crawler-Alert：クローラーが訪れたらメールでお知らせ

Webページにクローラーが訪れるとメールでお知らせしてくれるサービス、Crawler-Alertの紹介。

ロボット型検索エンジンのクローラーがいつ自分のサイトに訪れたのかは気になるものだ。でも毎日ログを見てチェックするのも面倒。そんな方には Crawler Alert。

Crawler Alert はクローラーがあなたのWebページに訪れた時にメールで知らせてくれるサービス。登録をして指定されたファイルにページからリンクを張っておくだけの簡単作業。サービスも無料で提供されている。

Crawler Alert が識別可能なクローラーは以下の通り（引用）。主要なクローラーにはほとんど対応しています。ある特定のクローラーが訪れた時だけにメールで連絡といった詳細設定もできるようです。

Googlebot by Google and yahoo, teomaagent by Teoma, WISEnutbot by Wisenut, Zyborg by Wisenut, Scooter by Altavista, Mercator by Altavista, crawler@fast by FAST, FAST-WebCrawler by FAST and Lycos , moget by Goo, Slurp by Inktomi, Robozilla by DMOZ, Ask Jeeves by Ask Jeeves, MSNBOT by MSN (Microsoft), ia_archiver by Alexa, InfoSeek by InfoSeek, Ultraseek by InfoSeek, MantraAgent by LookSmart, and many more ... （一部省略）

Crawler Alert
http://www.crawler-alert.com/
Automatically get an email notification whenever a search engine crawler (spider/agent/robot) is scanning your website