Où se trouve le fichier robots.txt d'un site WordPress ?

Trouver le fichier robots.txt d'un site WordPress

Lorsque vous installer le CMS pour créer un nouveau site WordPress, celui-ci installe automatiquement un fichier robots.txt situé dans le dossier principal de votre hébergement web. Par exemple, si votre site WordPress se trouve sur le site votredomaine.com, le fichier sera accessible à l'URL votredomaine.com/robots.txt. Par défaut, le fichier devrait afficher un contenu semblable à ceci :

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/

Cet exemple de fichier robots.txt est évidemment très basique. La ligne identifié comme User-agent permet d'indiquer à quels bots les règles ci-dessous s’appliquent. Un astérisque, comme celui utilisé dans notre exemple, signifie que les règles sont universelles. Elles sont alors valables pour tous les bots.

Le fichier robots.txt créé par WordPress indique aux bots de ne pas explorer les répertoires wp-admin et wp-includes. Cette directive sont dues à des préoccupation de sécurité. Ces deux dossiers contiennent des fichiers sensibles que vous ne voulez pas voir sur les moteurs de recherche. Cela impliquerait d'importants risques de piratage.

Vous pouvez bien sûr ajouter les règles que vous souhaitez à votre fichier. Il toutefois être conscient qu’il s’agit d’un fichier robots.txt virtuel. Habituellement, l’emplacement WordPress du fichier robots.txt est dans votre répertoire racine. Il s'agit généralement du dossier appelé public_html ou encore nommé d’après votre site web.

Le fichier robots.txt mis en place par défaut sur WordPress présente toutefois une anomalie. Il n’est pas accessible à partir d'aucun répertoire. Il fonctionne, mais ne peut être édité. Si vous voulez y apporter des modifications, il vous faut créer votre propre fichier et le téléverser dans votre dossier racine en remplacement.

Mis à jour le : 01/04/2025