Comment masquer un site Web dans les résultats de recherche (SERP)
Google présente trois manières de masquer un site Web dans les résultats de recherche (SERP) et celle que vous devez utiliser en fonction de votre situation.
Google dit que le meilleur moyen de masquer un site Web dans les résultats de recherche est d'utiliser un mot de passe, mais vous pouvez envisager d'autres options.
Ce sujet est mis en lumière dans le dernier volet de la série de vidéos Ask Googlebot sur YouTube.
John Mueller de Google répond à une question demandant comment empêcher le contenu d'être indexé dans la recherche et si c'est quelque chose que les sites Web sont autorisés à faire.
"En bref, oui, vous pouvez", dit Mueller.
Il existe trois façons de masquer un site Web dans les résultats de recherche :
- Utiliser un mot de passe
- Bloquer l'exploration
- Bloquer l’indexation
Les sites Web peuvent soit désactiver complètement l'indexation, soit être indexés et masquer le contenu de Googlebot à l'aide d'un mot de passe.
Le blocage du contenu de Googlebot n'est pas contraire aux directives des webmasters, tant qu'il est bloqué aux utilisateurs en même temps.
Par exemple, si le site est protégé par mot de passe lorsqu'il est exploré par Googlebot, il doit également être protégé par mot de passe pour les utilisateurs.
Alternativement, le site doit avoir des directives en place pour empêcher Googlebot d'explorer ou d'indexer le site.
Là où vous pouvez rencontrer des problèmes, c'est si votre site Web propose un contenu différent à Googlebot qu'aux utilisateurs.
C'est ce qu'on appelle le « cloaking » et est contraire aux directives de Google.
Une fois cette distinction faite, voici les bonnes manières de masquer le contenu des moteurs de recherche.
3 façons de masquer le contenu des moteurs de recherche
1. Protection par mot de passe
Verrouiller un site Web avec un mot de passe est souvent la meilleure approche si vous souhaitez garder votre site privé.
Un mot de passe garantira que ni les moteurs de recherche ni les internautes aléatoires ne pourront voir votre contenu.
Il s'agit d'une pratique courante pour les sites Web en développement. La publication du site Web en direct est un moyen simple de partager le travail en cours avec les clients, tout en empêchant Google d'accéder à un site Web qui n'est pas encore prêt à être vu.
2. Bloquer l'exploration
Une autre façon d'empêcher Googlebot d'accéder à votre site consiste à bloquer l'exploration. Cela se fait avec le fichier robots.txt.
Avec cette méthode, les gens peuvent accéder à votre site avec un lien direct, mais il ne sera pas détecté par les moteurs de recherche « qui respectent les règles ».
Ce n'est pas la meilleure option, dit Mueller, car les moteurs de recherche peuvent toujours indexer l'adresse du site Web sans accéder au contenu.
C'est rare que cela se produise, mais c'est une possibilité dont vous devez être conscient.
Faut faire attention : malgré que certains moteurs de recherche comme Google et Bing puissent respecter vos directives du fichier robots, plusieurs autres moteurs ne le respectent pas.
3. Bloquer l’indexation
La troisième et dernière option consiste à bloquer l'indexation de votre site Web.
Pour cela, vous ajoutez une balise meta robots noindex à vos pages.
Une balise noindex indique aux moteurs de recherche de ne pas indexer cette page avant de l'avoir explorée.
Les utilisateurs ne voient pas la balise META et peuvent toujours accéder à la page normalement.
Bloquer l’indexation de votre site a l’aide de mot de passe est la meilleure option selon Google
Mueller conclut la vidéo en disant que la principale recommandation de Google est d'emprunter la voie du mot de passe :
« Dans l'ensemble, pour le contenu privé, notre recommandation est d'utiliser une protection par mot de passe. Il est facile de vérifier que cela fonctionne et cela empêche quiconque d'accéder à votre contenu.
Le blocage de l'exploration ou de l'indexation sont de bonnes options lorsque le contenu n'est pas privé. Ou s'il n'y a que certaines parties d'un site Web que vous souhaitez empêcher d'apparaître dans la recherche. »
Alire aussi:
- Google annule sa date limite d'indexation mobile-first!
- Fonctionnement des moteurs de recherche: exploration, indexation et classement