SEO
クロールバジェット
SEOにおけるクロールバジェットの意味、検索エンジンがWebサイトにクロールのリソースをどう割り当てるのか、被リンク元ページのインデックスにどう影響するのかを解説します
クロールバジェットとは、検索エンジンのボットが一定期間内にWebサイトでクロールするページ数のことです。これは2つの要素で決まります。クロール速度の上限(サーバーに負荷をかけずにボットがどれだけ速くクロールできるか)と、クロールの必要性(人気度や鮮度に基づいてGoogleがどれだけクロールしたいか)です。大規模サイトでは、クロールバジェットの最適化により重要なページが速やかにインデックスされるようになります。内部リンクとサイト構造は、クロールバジェットがページ間でどう配分されるかに直接影響します。被リンクはページの重要度を高めることで、検索エンジンにリンクされたページをより頻繁にクロールさせ、間接的にクロールバジェットに影響を与えることがあります。