Budget crawl : les conseils de Google pour une indexation efficace
Votre budget d'exploration (budget crawl) correspond au nombre de pages que Google va explorer et indexer sur votre site internet dans un délai prédéfini. Il détermine à quelle vitesse Google indexera votre nouveau contenu de site.
C'est pourquoi il doit être utilisé avec parcimonie; car une fois épuisé, votre nouveau contenu ne sera pas affiché dans les résultats de recherche.
Surtout si votre site internet est de grande taille. C'est stratégique : Plus il y a de pages à explorer et indexer, plus vous devez optimiser votre budget crawl.
Google a récemment opéré des changements clés dans sa documentation. Discrètement, l'entreprise a ajouté une nouvelle puce de bonnes pratiques à sa section pour la parité1 du budget d'exploration.
Des changements importants pour le budget d'exploration
Les administrateurs de sites internet doivent veiller à ce que leurs versions mobiles contiennent tous les liens des versions bureau. Sans cette harmonisation, l'exploration de leurs pages sera ralentie.
Seront principalement impactés, les sites internet sujets à des problèmes d'indexation, et ceux qui comprennent plus de 10 000 pages.
Google recommande également d'inclure des ensembles de liens complets dans le code HTML mobile.
Les sites impactés par les nouvelles directives de budget crawl
Vous êtes concerné si :
- Votre site est grand : comporte plus d'un million de pages et son contenu est mis à jour chaque semaine.
- Votre site est moyen : comporte plus de 10 000 pages et son contenu est mis à jour chaque jour.
- Votre site affiche dans la Google Search Console : Découvert – actuellement non indexé pour de nombreuses URL
Ce que vous pouvez faire
- L'audit de vos architectures de liens bureau et mobiles
- L'ajout des URL significatives et la mise à jour des plans de site
- Contrôler l'accessibilité des chemins de navigation critiques sur mobiles
- Anticiper les éventuels problèmes d'exploration via la surveillance des statistiques
Les notions importantes pour le SEO
- Google souhaite éviter les retards d'exploration et d'indexation des sites internet.
- Pour cela, il est recommandé de présenter des liens identiquessur la version bureau et la version mobile de votre site internet (pas de parité)
- Vos Sitemaps doivent être complets et accessibles pour les versions bureau et mobiles pour renforcer l'efficacité du crawl
- Il faut déployer des balises lastmod dans les plans de sites
- Les contenus d'actualités doivent être conçus avec des plans de sites d'actualités3
- Une conception réactive4 des sites internet est vivement recommandée
- Le maître mot pour vous en sortir est de rester cohérent.
- Les nouvelles exigences de Google prennent effet immédiatement5.
Références
- Link Parity Affects Crawl Budget, Sketchweb. Publié le 02 novembre 2024. Consulté le 07 novembre 2024. ↩︎
- Google Updates Crawl Budget Best Practices, Search Engine Journal. Publié le 1er novembre 2024. Consulté le 07 novembre 2024. ↩︎
- Google Updates Crawl Budget Documentation for Mobile-Desktop Link Parity, Swipe Insight. Publié le 02 novembre 2024. Consulté le 07 novembre 2024. ↩︎
- Google updates crawl budget docs for large sites with differing mobile and desktop pages and links, Search Engine Land. Publié le 1er novembre 2024. Consulté le 07 novembre 2024. ↩︎
- Google updates Mobile Site Requirements for large website indexing Google announces new , PPC Land. Consulté le 07 novembre 2024. ↩︎