Comment empêcher les moteurs de recherche d'explorer un site WordPress

Récemment, un de nos utilisateurs nous a demandé comment empêcher les moteurs de recherche d’explorer et d’indexer son site WordPress.

Il existe plusieurs scénarios dans lesquels vous souhaiteriez empêcher les moteurs de recherche d’explorer votre site Web et de le répertorier dans les résultats de recherche.

Dans cet article, nous allons vous montrer comment empêcher les moteurs de recherche d’explorer un site WordPress.

Pourquoi empêcher les moteurs de recherche d’explorer un site WordPress ?

Pour la plupart des sites WordPress, les moteurs de recherche constituent la principale source de trafic. Vous vous demandez peut-être pourquoi quelqu’un voudrait bloquer les moteurs de recherche ?

Voici quelques situations dans lesquelles vous ne souhaiterez pas que les moteurs de recherche indexent votre site Web :

Au début, vous ne savez peut-être pas comment créer un environnement de développement local ou un site de développement, et à la place, vous développez votre site Web pendant qu'il est en ligne. Vous ne voudrez pas que Google indexe votre site lorsqu'il est en construction ou en mode maintenance.

De nombreuses personnes utilisent également WordPress pour créer des blogs privés. Ils ne veulent pas qu’ils soient indexés par les moteurs de recherche car ils sont privés.

Vous pouvez utiliser WordPress pour la gestion de projet ou un intranet. Dans ces cas-là, vous ne souhaiterez pas que vos documents internes soient accessibles au public.

Une idée fausse courante est que si vous n’avez pas de liens pointant vers votre domaine, les moteurs de recherche ne trouveront probablement jamais votre site Web. Ce n'est pas tout à fait vrai.

Par exemple, il peut y avoir des liens pointant vers votre site parce que le nom de domaine appartenait auparavant à quelqu'un d'autre. En outre, il existe des milliers de pages sur Internet qui répertorient simplement les noms de domaine. Votre site peut apparaître sur l'un d'entre eux.

Cela étant dit, voyons comment empêcher les moteurs de recherche d’explorer votre site Web. Nous aborderons quatre méthodes :

Méthode 1 : demander aux moteurs de recherche de ne pas explorer votre site WordPress

Il s’agit de la méthode la plus simple, mais elle ne protège pas entièrement votre site Web contre l’exploration.

WordPress est livré avec une fonctionnalité intégrée qui vous permet d'indiquer aux moteurs de recherche de ne pas indexer votre site. Tout ce que vous avez à faire est de visiter Paramètres » Lecture et de cocher la case à côté de « Visibilité des moteurs de recherche ».

Lorsque cette case est cochée, WordPress ajoute cette ligne à l’entête de votre site web :

<meta name='robots' content='noindex,follow' />

WordPress modifie également le fichier robots.txt de votre site et y ajoute ces lignes :

User-agent: *
Disallow: /

Ces lignes demandent aux robots (web crawlers) de ne pas indexer vos pages. Cependant, il appartient entièrement aux moteurs de recherche d’accepter cette demande ou de l’ignorer. Même si la plupart des moteurs de recherche respectent la demande, il est toujours possible que certaines pages ou images de votre site soient indexées.

Si vous souhaitez empêcher les moteurs de recherche d'indexer ou d'explorer votre site Web, vous devrez alors protéger votre site WordPress par mot de passe en utilisant les méthodes 3 ou 4.

Méthode 2 : demander aux moteurs de recherche de ne pas explorer des pages individuelles

Vous souhaiterez peut-être que les moteurs de recherche explorent et indexent votre site Web, mais n'incluent pas certaines publications ou pages dans les pages de résultats de recherche.

Le moyen le plus simple de le faire est d'utiliser le plugin All in One SEO (AIOSEO). Il s'agit du meilleur outil de référencement pour WordPress et plus de 3 millions d'entreprises lui font confiance.

Pour ce didacticiel, nous utiliserons la version gratuite d'AIOSEO car elle inclut l'outil d'analyse SEO. Il existe également une version premium d'AIOSEO qui offre plus de fonctionnalités telles que des outils de plan de site, un gestionnaire de redirection, un balisage de schéma, un éditeur robots.txt, etc.

La première chose que vous devrez faire est d'installer et d'activer le plugin AIOSEO sur votre site Web. Vous pouvez apprendre à installer et configurer le plugin en suivant notre guide étape par étape sur la configuration de All in One SEO pour WordPress.

Une fois le plugin configuré, vous pouvez l’utiliser pour demander aux moteurs de recherche de ne pas indexer certains articles et pages. Encore une fois, c'est aux moteurs de recherche d'accepter cette demande ou de l'ignorer.

Modifiez simplement la publication ou la page que vous ne souhaitez pas indexer. Vous devez faire défiler jusqu'à Paramètres AIOSEO en bas de l'éditeur WordPress, puis cliquer sur l'onglet « Avancé ».

Notez que l'article utilise les paramètres par défaut des robots.

Pour changer cela, vous devez mettre le bouton « Utiliser les paramètres par défaut » en position d'arrêt.

Vous pouvez maintenant cocher la case « Aucun index ». Une fois l’article publié ou mis à jour, les moteurs de recherche seront invités à ne pas l’indexer.

Méthode 3 : protection par mot de passe d'un site entier à l'aide de cPanel

Si votre fournisseur d'hébergement WordPress propose un accès cPanel pour gérer votre compte d'hébergement, vous pouvez alors protéger l'intégralité de votre site à l'aide de cPanel.

Tout ce que vous avez à faire est de vous connecter à votre tableau de bord cPanel, puis de cliquer sur l'icône « Confidentialité du répertoire » dans la section « Fichiers ».

Ensuite, vous devez trouver le dossier dans lequel vous avez installé WordPress. Il s'agit généralement du dossier public_html.

Après cela, cliquez simplement sur le bouton « Modifier » à côté de ce dossier.

Remarque : Si vous avez plusieurs sites WordPress installés dans le répertoire public_html, vous devez cliquer sur le lien public_html pour parcourir ces sites, et puis modifiez le dossier du site Web que vous souhaitez protéger par mot de passe.

Cela vous amène à un écran où vous pouvez activer la protection par mot de passe.

Cochez simplement la case « Protéger ce répertoire par mot de passe » et cliquez sur le bouton « Enregistrer ». Si vous le souhaitez, vous pouvez également personnaliser le nom du répertoire protégé.

Vous verrez un message de confirmation indiquant que les autorisations d'accès au répertoire ont été modifiées.

Ensuite, vous devez cliquer sur le bouton « Revenir en arrière ».

Vous serez redirigé vers un écran où vous pourrez créer un nom d'utilisateur et un mot de passe qui devront être utilisés pour accéder à ce répertoire.

Vous devez saisir un nom d'utilisateur et un mot de passe, puis confirmer le mot de passe. Assurez-vous de noter votre nom d'utilisateur et votre mot de passe dans un endroit sûr, tel qu'une application de gestion de mots de passe.

Une fois que vous avez cliqué sur le bouton « Enregistrer », vous avez ajouté avec succès une protection par mot de passe à votre site WordPress.

Désormais, chaque fois qu'un utilisateur ou un moteur de recherche visite votre site Web, il sera invité à saisir le nom d'utilisateur et le mot de passe que vous avez créés précédemment pour consulter le site.

Méthode 4 : Protection par mot de passe de WordPress avec un plugin

Si vous utilisez une solution d'hébergement WordPress gérée, vous n'aurez peut-être pas accès à cPanel. Dans ce cas, vous pouvez utiliser un plugin WordPress pour protéger votre site par mot de passe.

Voici les deux solutions les plus populaires :

SeedProd est le plugin n°1 à venir et en mode maintenance pour WordPress, utilisé sur plus de 800 000 sites Web. Il est livré avec des fonctionnalités complètes de contrôle d'accès et d'autorisations que vous pouvez utiliser pour cacher votre site Web à tout le monde, y compris aux moteurs de recherche. Nous avons un guide étape par étape pour SeedProd.
Mot de passe protégé est un moyen très simple de protéger votre site WordPress par mot de passe avec un seul mot de passe (aucune création d'utilisateur n'est nécessaire). Consultez notre guide étape par étape sur la façon de protéger par mot de passe un site WordPress.

Nous espérons que cet article vous a aidé à empêcher les moteurs de recherche d’explorer ou d’indexer votre site WordPress. Vous voudrez peut-être également consulter notre guide sur la façon d’accélérer les performances de votre site Web ou consulter nos choix d’experts pour les meilleurs plugins de page de destination WordPress.

Si vous avez aimé cet article, abonnez-vous à notre chaîne YouTube pour les didacticiels vidéo WordPress. Vous pouvez également nous trouver sur Twitter et Facebook.