クローラーの訪問頻度チェックする方法
クローラー・検索エンジンスパイダーの訪問頻度を知る方法。
みなさんは、いつ自分のホームページやブログに
検索エンジンのクローラー・スパイダーが来ているか知りたくないですか？
私も、自サイトにどれくらいの頻度でクローラーが来ているのか知りたいと思い
色々と調べてました。
通常、アクセス解析ソフトは、ウェブページへJavaScriptを仕込み解析しますが
クローラーはJavaScriptファイルを読込みや実行もしないため、
ログが残らず解析できないのです。
ですから、レンタルサーバーを利用している場合は、
生ログをダウンロード→解凍→
解凍ファイルをJgrep などの検索ツールを使って、
Slurp、msnbot、googlebot などで検索→抽出。
という風にしらべます。
とっても、面倒です。
何か他にクローラーの来訪頻度を調べる方法は、ないかと探していたら、
ありました！しかも１００％無料で
検索エンジンスパイダーの巡回が正確に知ることができます！
Spidermaticは、検索エンジンスパイダーがあなたのウェブサイトを訪れる度に
自動でメール送信して知らせてくれます！
設定も非常に簡単です。
指定されたファイルを調べたいディレクトリーにアップロードするだけです。
しかも、多数の検索エンジンの中から知らせて欲しい
検索エンジンを選択できます。
これが無料とは驚きます。
一度お試し下さい！
