An open book with a covered passage sits in a sunlit library beside a separate closed archive door.

Robots.txt ou noindex : choisir le bon contrôle de visibilité dans Google

Avant de chercher comment bloquer Google, décidez ce qui doit cesser : l’accès public, la présence dans les résultats ou l’affichage d’un passage. La mise à jour documentaire du 21 octobre rassemble des contrôles existants. Elle offre un motif utile pour auditer le site, sans signaler un nouveau changement de classement. Le travail consiste à associer chaque objectif métier à un contrôle vérifiable.

Commencer par le résultat attendu

Rédigez une phrase à faire approuver par le responsable de la page. Par exemple : « Les clients peuvent ouvrir cette page de campagne, mais elle ne doit pas apparaître dans les résultats. » Cela diffère de « Seuls les clients autorisés peuvent lire ce document tarifaire ». Un troisième objectif peut être de garder la page visible tout en excluant un passage des extraits. Assimiler ces trois demandes à un blocage d’exploration entretient l’ambiguïté.

Notre méthode proposée commence par le public visé, la valeur des visites issues de la recherche et les conséquences d’une exposition involontaire. Nommez le responsable du contenu avant de modifier un modèle. Si personne ne sait expliquer pourquoi l’URL doit disparaître, examinez le problème avant d’étendre une exclusion.

Adapter le contrôle à la ressource

  • Contenu privé : utilisez une authentification ou retirez-le de l’hébergement public. Exclure un résultat ne rend pas une URL publique confidentielle.
  • Page publique à ne pas indexer : envisagez noindex. Google doit pouvoir explorer la page pour lire cette règle ; un blocage dans robots.txt peut l’en empêcher.
  • Ressource autre qu’une page HTML : un en-tête de réponse X-Robots-Tag peut transmettre les instructions d’indexation, notamment pour un PDF.
  • Passage à exclure des extraits : examinez data-nosnippet et les réglages de présentation associés plutôt que de retirer toute la page.
  VideoObject structured data : quoi auditer après la mise à jour Google

La vue d’ensemble de Google mentionne aussi un contrôle des fonctions génératives de Search à l’échelle du site. Séparez cette décision de l’accès public ou de l’indexation d’une page précise. Avant de modifier un tel réglage, faites définir le résultat recherché et consultez les instructions du produit. Un contrôle global doit répondre à un objectif de même portée.

Tester une URL avant de changer le modèle

Choisissez une page représentative et consignez son état actuel, la règle pertinente et le résultat attendu. Examinez la réponse reçue par un visiteur non connecté. Pour un document, vérifiez les en-têtes du fichier lui-même, pas seulement la page HTML qui le référence. Contrôlez ensuite ce que Google peut récupérer avec l’inspection d’URL dans Search Console.

Prenez une seconde URL hors du périmètre prévu comme témoin. Le test doit démontrer que l’exclusion existe là où elle est nécessaire et qu’une page commerciale importante ne l’a pas héritée. Vérifiez séparément les traductions et variantes de fichiers. Une modification réussie dans le CMS ne prouve pas encore que le résultat voulu existe dans la recherche.

Rendre la décision réversible

Conservez la date, le modèle concerné, le responsable et la condition d’annulation. Suivez le résultat après le retraitement de la ressource par Google ; un constat immédiatement après le déploiement n’est pas définitif. Si le problème urgent est l’exposition de données privées, corrigez d’abord l’accès à la source sans attendre qu’un résultat de recherche évolue.

Pour le responsable SEO, le livrable est un registre simple : objectif, ressource, contrôle, preuve du test et prochaine révision. Cela suffit à rendre compréhensible une future remise en ligne de campagne. Ce registre évite aussi de maintenir des exclusions obsolètes simplement parce que personne ne se souvient de leur raison d’être.

Sources

  Bonobos montre comment transformer un bénéfice produit en contenu épisodique

Alice Butler

Brandformance editorial contributor covering marketing strategy, digital media, SEO, analytics, ecommerce, martech, and marketing operations. Articles are prepared from cited public sources using an AI-assisted multilingual workflow with source, language, duplication, image, and rendered-page quality checks.