クロールとは、検索エンジン内のプログラムであるクローラ―がインターネット上でウェブサイトを巡回し、サイトの情報を収集することを言います。ウェブサイトをクロールすることでそのウェブページがどのようなテーマで構成されているか、どんなキーワードが設定されているか、ユーザーにとって良質なページであるかなどの様々な視点から情報を収集し、インデックス化されることで検索エンジンに表示されるようになり、表示順も決定されます。

クローラーの巡回

クローラ―はページ内のリンクをたどりながらサイト内をクロールします。また、すべてのページをクロールするわけではありません。テーマやキーワードに関連したページへのリンクを設置することで、一度のクロールで多くの情報をクローラ―へ与えることができるようなります。ウェブサイト内でより多くのページが検索エンジンから直接表示されるためには、まずクロールされることが必要です。よって、より多くのページがクロールされやすいようにサイトの構造を工夫したり、関連ページからの外部被リンクを得たりすることで、クローラビリティを向上させることが可能です。