Google affirme que le meilleur moyen de masquer un site web dans les résultats de recherche est d'utiliser un mot de passe, mais il existe d'autres options à envisager.
Ce sujet est mis en lumière dans le dernier épisode de la série de vidéos « Demandez à Googlebot » sur YouTube.
John Mueller de Google répond à une question demandant comment empêcher un contenu d'être indexé dans les moteurs de recherche, et si les sites web sont autorisés à le faire.
« En résumé, oui, c’est possible », affirme Mueller.
Il existe trois façons de masquer un site web dans les résultats de recherche :
- Utilisez un mot de passe
- Blocage de l'exploration
- Indexation par blocs
Les sites web peuvent soit refuser complètement l'indexation, soit se faire indexer et masquer leur contenu à Googlebot à l'aide d'un mot de passe.
Bloquer du contenu pour Googlebot n'est pas contraire aux consignes aux webmasters, à condition que ce contenu soit également bloqué pour les utilisateurs.
Par exemple, si le site est protégé par un mot de passe lorsqu'il est exploré par Googlebot, il doit également l'être pour les utilisateurs.
Alternativement, le site doit comporter des directives empêchant Googlebot d'explorer ou d'indexer le site.
Le problème peut survenir si votre site web propose un contenu différent à Googlebot et à vos utilisateurs.
Cela s'appelle le « cloaking » et c'est contraire aux règles de Google.
Cette distinction étant faite, voici les méthodes correctes pour masquer du contenu aux moteurs de recherche.
3 façons de masquer du contenu aux moteurs de recherche
1. Protection par mot de passe
Protéger un site web par un mot de passe est souvent la meilleure solution si vous souhaitez préserver sa confidentialité.
Un mot de passe garantira que ni les moteurs de recherche ni les internautes lambda ne pourront voir votre contenu.
C'est une pratique courante pour les sites web en développement. La mise en ligne du site permet de partager facilement l'avancement du travail avec les clients, tout en empêchant Google d'accéder à un site qui n'est pas encore prêt à être consulté.
2. Ramper dans les blocs
Une autre façon d'empêcher Googlebot d'accéder à votre site consiste à bloquer son exploration. Cela se fait grâce au fichier robots.txt.
Grâce à cette méthode, les internautes peuvent accéder à votre site via un lien direct, mais celui-ci ne sera pas indexé par les moteurs de recherche « normaux ».
Ce n'est pas la meilleure option, explique Mueller, car les moteurs de recherche pourraient toujours indexer l'adresse du site web sans accéder à son contenu.
C'est rare, mais c'est une possibilité dont vous devez être conscient.
3. Indexation par blocs
La troisième et dernière option consiste à empêcher l'indexation de votre site web.
Pour cela, vous ajoutez une balise méta robots noindex à vos pages.
Une balise noindex indique aux moteurs de recherche de ne pas indexer cette page jusqu'à ce qu'elle soit indexée. après ils le rampent.
Les utilisateurs ne voient pas la balise méta et peuvent toujours accéder à la page normalement.
Dernières réflexions de Mueller
Mueller conclut la vidéo en indiquant que la principale recommandation de Google est d'opter pour la solution du mot de passe :
« De manière générale, pour les contenus privés, nous recommandons d'utiliser une protection par mot de passe. Il est facile de vérifier son bon fonctionnement et cela empêche quiconque d'accéder à vos contenus. »
Bloquer l'exploration ou l'indexation est une bonne option lorsque le contenu n'est pas privé. Ou s'il y a seulement des parties d'un site web que vous souhaitez empêcher d'apparaître dans les résultats de recherche.
___
by Matt Southern
la source: SEJ
