La fréquence de crawl désigne le rythme auquel le robot d’un moteur de recherche revient explorer les pages d’un site, mesuré par le nombre de requêtes sur une période ou par l’intervalle entre deux visites d’une même page.
Ce rythme est d’abord calculé par le moteur, à partir de deux familles de critères. Les premières tiennent à la capacité du serveur : des réponses rapides et stables autorisent davantage de requêtes, des erreurs ou des lenteurs les réduisent. Les secondes tiennent à l’intérêt des pages pour le moteur : popularité, fréquence de mise à jour, volume d’adresses connues. Certains moteurs permettent toutefois au propriétaire du site de le limiter, par une directive du fichier robots.txt ou un réglage de leur outil pour webmasters. Le rythme varie donc d’une page à l’autre. Une page d’accueil ou une rubrique d’actualité est revisitée souvent, une page profonde et stable beaucoup plus rarement.
La fréquence de crawl s’observe à deux niveaux. À l’échelle du site, elle se lit en volume de requêtes par jour. À l’échelle de la page, elle se lit en délai depuis le dernier passage du crawler. On distingue aussi les visites de découverte, consacrées à des adresses nouvelles, des visites d’actualisation, qui reviennent sur des pages déjà connues.
La notion se distingue du budget de crawl, qui désigne l’ensemble des adresses que le moteur peut et veut explorer, et de la crawlabilité, qui décrit la facilité d’accès aux pages. Une exploration fréquente ne garantit ni l’indexation ni le classement. Le terme s’emploie en référencement technique, en analyse des journaux serveur et lors des migrations de site.
Chercher à faire monter la fréquence de crawl est rarement utile. Ce qui compte, selon nous, c’est que les pages qui changent soient revisitées après leur modification, et que les pages inutiles n’absorbent pas les visites du robot. Le guide de Google Search Central sur la gestion du budget d’exploration (2026) le confirme en creux : la demande d’exploration dépend de la popularité des adresses et de leur fraîcheur, tandis que la capacité baisse en cas d’erreurs serveur, de réponses 429 ou de hausse de la latence.
La page de Google Search Central consacrée à la réduction de la vitesse d’exploration (2026) indique comment freiner temporairement le robot : renvoyer des codes 500, 503 ou 429 au lieu de 200, pendant quelques heures ou un à deux jours. Elle déconseille de prolonger au-delà : si ces codes persistent plusieurs jours sur une même adresse, celle-ci peut être retirée de l’index.
Le rapport Statistiques sur l’exploration de la Google Search Console (aide Search Console) indique le nombre total de requêtes, le volume téléchargé et le temps de réponse moyen. Il les ventile par code de réponse, type de fichier, objectif (découverte ou actualisation) et type de robot. L’aide précise que ce rapport vise les utilisateurs avancés et n’est pas nécessaire pour un site de moins de mille pages.
Pour un suivi page par page, l’analyse de logs SEO reste la source la plus précise. Nous recommandons deux repères : le délai entre une mise à jour et le passage suivant du robot, et la part des pages stratégiques visitées sur trente jours.
Advalians vérifie vos données, mesure ce que votre site produit en contacts et votre visibilité dans les assistants IA, puis vous dit où concentrer le budget.
Advalians, cabinet de conseil indépendant en marketing et communication, vous aide à clarifier vos choix et à décider.
Le budget de crawl est un volume : l’ensemble des adresses qu’un moteur peut et veut explorer sur un site. La fréquence de crawl est un rythme : la cadence à laquelle le robot revient sur le site ou sur une page donnée. Les deux dépendent des mêmes critères, la capacité du serveur et l’intérêt des pages.
En pratique, un petit site n’a presque jamais de problème de budget, mais il peut constater qu’une page clé est rarement revisitée. Commencez alors par vérifier ses liens internes et sa présence dans le sitemap.
Rendez la modification visible pour le robot par trois signaux cohérents. Mettez à jour la date lastmod de la page dans le sitemap, à condition qu’elle reflète une vraie modification du contenu. Placez un lien vers la page depuis des pages souvent explorées, comme l’accueil ou une rubrique active. Demandez, si besoin, l’indexation de l’adresse dans l’outil d’inspection de la console du moteur : la demande reste sans garantie.
Gardez des attentes réalistes : ces gestes accélèrent la découverte, ils ne garantissent ni un délai ni l’indexation. Évitez de modifier artificiellement les dates pour attirer le robot.
Deux sources se complètent. Le rapport sur les statistiques d’exploration de l’outil pour webmasters du moteur donne une vue d’ensemble : requêtes par jour, temps de réponse, répartition entre découverte et actualisation. Les journaux du serveur donnent le détail page par page.
Pour un suivi régulier, extrayez des journaux la date du dernier passage du robot sur chaque page stratégique. Calculez ensuite deux repères : la part de ces pages visitées sur trente jours et le délai moyen entre une mise à jour et la visite suivante. Vérifiez au préalable que les visites viennent bien du robot déclaré.
Pas forcément : c’est un symptôme à expliquer, pas un diagnostic. Une baisse suit souvent un incident serveur, une hausse du temps de réponse ou la suppression de nombreuses pages. Elle peut aussi refléter un site devenu plus stable, que le robot revisite moins.
Vérifiez dans l’ordre : les erreurs serveur et les temps de réponse sur la période, les modifications récentes de robots.txt, puis l’évolution du nombre de pages indexées. Si ces trois points sont stables et que le trafic issu de la recherche se maintient, la baisse ne demande pas d’action.
Seulement si des pages importantes tardent à être revisitées après une modification. C’est le cas des sites à fort renouvellement : actualités, catalogues aux prix et stocks changeants, offres d’emploi, petites annonces. Pour un site vitrine stable, une exploration peu fréquente est normale et sans conséquence.
Si le besoin est réel, agissez sur les causes : temps de réponse du serveur, suppression des adresses en double, sitemap exact, liens internes vers les pages récentes. Renoncez aux astuces qui simulent une activité, comme des dates modifiées sans changement de contenu.
Modèles, grilles et guides prêts à l’emploi pour vos projets marketing et communication.
