クッキー必要なWebはクロールできない

クッキー必要なWebはクロールできない

Webサイトのコンテンツ表示時にクッキーを要求する場合、検索エンジンのクローラはアクセスできませんからインデックスされません。

■質問

私のWebサイトは検索エンジンに全く登録されないのですがどうしたらよいでしょう。考えられる原因は、ブラウザのクッキーを有効にしないといけない点です。

（質問者：匿名）

■回答

Google が公開しているウェブマスターのための Google 情報を見てみましょう。

Javascript、Cookie、セッション ID、フレーム、DHTML、フラッシュなどの特殊な機能を使用しているために、テキスト ブラウザではサイトのすべてが見えないような場合、サーチ エンジン クローラがサイトをクロールするときに問題が生じる可能性があります。（Web マスターのための Google 情報 / 技術関連のガイドライン）

ここに記載してある通り、Google はテキストブラウザのような見方をします。クッキーにも対応していませんから、質問者の方のようにアクセス時にクッキーが有効であることを要求するサイトを Google はインデックスすることができません。

Google に限らず検索エンジンのクローラーはクッキーを要求されるWebをインデックスできません。クッキーなしでもアクセスできるようにもう１度システムの設計を見直しましょう。