Le 11 novembre 2026, Google Search Central a publié sur son blog « Moving to a CDN without overwhelming your origin (or blocking Googlebot) ». L'enjeu : un mauvais réglage du CDN peut empêcher Google d'explorer votre site et faire sortir vos pages des résultats. Voici ce que dit Google, et ce que ça change pour une PME.

Qu'est-ce qu'un CDN ?

Un CDN (réseau de diffusion de contenu) diffuse les fichiers de votre site depuis des serveurs rapides, répartis dans le monde et proches des visiteurs. Selon Google, il réduit le temps de réponse et protège le serveur d'origine (celui qui détient le contenu original) d'un trafic trop lourd.

Mais Google prévient que la transition peut surprendre : des propriétaires de sites voient le trafic des robots sur leur serveur grimper presque aussitôt après la mise en place du CDN, alors que c'était justement ce qu'ils voulaient éviter.

Pourquoi Google explore davantage juste après

L'explication tient à la capacité d'exploration (crawl capacity limit, ou hostload), décrite dans le guide de Google sur le budget d'exploration. Google veut explorer un site sans surcharger ses serveurs :

  • si le site répond de façon régulière et que ses temps de réponse restent stables ou s'améliorent, la limite monte ;
  • s'il ralentit ou renvoie des erreurs serveur (5xx) ou des signaux de limitation (429), elle baisse et Google explore moins.

Dès que votre nom de domaine pointe vers le CDN, les temps de réponse chutent. Pour les robots de Google, écrit l'article, c'est comme si votre serveur venait de recevoir une énorme mise à niveau matérielle : ils augmentent leur rythme, à condition qu'il y ait des pages à explorer.

Le vrai point faible : le cache vide

Le problème : un CDN neuf démarre avec un cache vide (on dit « froid »). À la première demande d'une page, il n'en a pas de copie : c'est un cache miss. Il va la chercher sur votre serveur d'origine, la garde, puis la sert. Seules les demandes suivantes sont servies directement par le CDN.

Au fond, le vrai goulot d'étranglement lors du lancement d'un CDN reste le serveur d'origine.

Google Search Central, Blog Google Search Central, 11 novembre 2026 (traduction)

Les visiteurs se concentrent sur quelques pages populaires, qui entrent vite dans le cache. Les robots font l'inverse : ils parcourent méthodiquement toutes vos adresses, et chaque page pas encore en cache remonte jusqu'à votre serveur. Même si les robots de Google n'accélèrent pas d'un coup, tant que le cache n'est pas rempli, l'origine fait l'essentiel du travail.

Le piège : la protection anti-robots « générale »

Face à un graphique de requêtes qui s'envole, la tentation est d'activer, dans le tableau de bord du CDN, une protection anti-robots sur tout le site. C'est ce que Google déconseille.

Une telle règle traite tout le trafic automatisé de la même façon. Quand un CDN ou un pare-feu applicatif (WAF) présente un test de type CAPTCHA, les robots de Google échouent.

Laisser une protection anti-robots générale activée sans exempter les robots vérifiés laisse en pratique les robots d'exploration bloqués sur une page d'erreur inutile pour la recherche, ou pour les autres produits qui s'appuient sur les données explorées. De notre point de vue, votre site paraît volontairement restreint ou cassé.

Google Search Central, Blog Google Search Central, 11 novembre 2026 (traduction)

Si la règle reste en place, les robots de Google ralentissent, et vos pages comme vos fiches produits commencent à sortir des résultats.

Ce que recommande Google

  1. Autoriser les robots vérifiés. Selon Google, la plupart des grands CDN et pare-feu proposent une option ou une règle prête à l'emploi pour laisser passer les robots connus et vérifiés. Mieux encore : visez les robots indésirables précis, dans le robots.txt ou par des règles, plutôt que de bloquer tous les clients automatisés.
  2. Préchauffer le cache. Avant de basculer tout le trafic, appelez à un rythme maîtrisé vos pages les plus visitées, celles qui vont l'être (promotion, lancement saisonnier) et les plus explorées.
  3. Freiner temporairement. Si l'exploration pèse encore trop sur votre serveur, renvoyez un code 429 (trop de requêtes) ou 503 (service indisponible) pendant quelques heures, ou 1 à 2 jours au plus.

La page de Google sur la réduction de la fréquence d'exploration précise le mécanisme : Google ralentit sur tout le nom d'hôte, puis réaccélère quand les erreurs diminuent. Elle déconseille d'aller au-delà de 1 à 2 jours : une adresse qui renvoie ces codes plusieurs jours de suite peut être retirée de l'index.

Ce que ça change pour une PME

Le budget d'exploration n'est pas votre premier souci

Le guide sur le budget d'exploration vise surtout les gros sites : plus d'un million de pages modifiées environ chaque semaine, ou plus de 10 000 pages qui changent chaque jour (des ordres de grandeur, précise Google). Si vos pages sont explorées le jour même de leur publication, ce guide ne vous concerne pas. Pour un site vitrine de quelques centaines de pages, la hausse d'exploration après le passage au CDN est passagère et ne justifie pas de tout verrouiller.

Le vrai risque : le réglage fait trop vite

Mon avis : pour une PME, le danger est la case cochée dans la précipitation. Une protection sans exception peut couper l'accès de Google alors que, de votre côté, le site semble fonctionner. On risque de ne s'en apercevoir qu'une fois des pages sorties des résultats.

Ce site est lui-même servi par un CDN : l'outil n'est pas en cause, ce sont les règles de sécurité qui l'accompagnent.

Vérifier que c'est bien Google

Un robot peut se faire passer pour Googlebot. Google publie la méthode pour vérifier ses robots : une recherche DNS inverse sur l'adresse IP doit renvoyer un domaine googlebot.com, google.com ou googleusercontent.com, et une recherche directe doit redonner la même adresse. Pour une vérification automatique, Google publie aussi les plages d'adresses IP de ses robots.

Pour le robots.txt, même logique que pour les robots IA dont je parlais à propos du signal commun d'entraînement des IA : bloquer précisément ce que vous ne voulez pas, jamais tout le monde par défaut.

Ce que vous pouvez faire dès cette semaine

  1. Demandez à votre prestataire ou hébergeur si votre site passe par un CDN ou un pare-feu applicatif, et si une protection anti-robots y est activée.
  2. Vérifiez que les robots vérifiés sont exemptés de tout CAPTCHA ou blocage. Une règle contre des robots indésirables doit les nommer, pas viser tout le trafic automatisé.
  3. Contrôlez l'indexation de vos pages dans Search Console, comme dans mon audit SEO WordPress en 12 points. Une baisse soudaine après un changement de CDN doit alerter.
  4. Avant une migration, prévoyez le préchauffage du cache et, en cas de surcharge, un frein en 429 ou 503 limité à 1 à 2 jours.
  5. Faites le point avec mon audit SEO gratuit, ou découvrez ma démarche de référencement SEO. Pour un projet de migration, contactez-moi.

Sources