Efficacité de la balise meta « robots » et du fichier Robots.txt pour la désindexation

Test 1 : balise meta name=robots content=noindex

Objectif : vérifier la possibilité d’empêcher l’indexation d’une page via la balise noindex placée dans le corps de la page, ailleurs que dans le head.

Méthodologie :

• Création d’une page maillée sur le site
• Insertion de la balise meta name=robots content=noindex dans le corps du texte
• Demande d’indexation de la page via la Search Console
• Monitoring

Résultats

La page comportant la balise meta name=robots content=noindex dans le corps du texte n’est pas indexée.

Test 2 : consigne Noindex: dans le robots.txt

Objectif : constater l’efficacité de la consigne Noindex: dans le fichier robots.txt pour bloquer l’indexation d’une page.

Méthodologie :

• Création d’une page maillée sur le site
• Ajout de la consigne Noindex: /page-a-bloquer/ dans le fichier robots.txt
• Demande d’indexation de la page via la Search Console
• Monitoring

Duplication de l’expérience sur 10 sites de test.

Résultats :

Deux semaines après la demande d’indexation, la page indiquée dans le fichier Robots.txt est indexée. Cette dernière ressort dans la SERP, avec comme meta description la mention : “La description de ce résultat n’est pas disponible en raison du fichier robots.txt de ce site.”

Conclusions :

• la balise meta name=robots content=noindex empêche l’indexation d’une page, même placée ailleurs que dans le head;
• la consigne Noindex: /page-a-bloquer/ dans le fichier robots.txt n’empêche pas l’indexation et semble être comprise par Google comme une commande Disallow.