クロール

クロールとは検索エンジンGoogleのロボットがWeb上を徘徊してWebサイトの情報を集めることをいいます。クロールにはフレッシュ・クロールとメイン・クロールの2種類があります。
フレッシュ・クロールはほぼ毎日巡回していますが、その対象となるWebサイトは一部の上、ネストの深さも定まっていません。
メイン・クロールはだいたい一か月に1回の頻度で巡回し、本格的なキャッシュ情報の更新に用いられます。ちなみにグーグル・ダンスはこの更新作業中に発生するといわれています。