← Tous les outils texte

Testeur de robots.txt

Récupérez ou collez un robots.txt et vérifiez si Googlebot et les autres robots peuvent accéder à une URL.

  • Gratuit
  • Sans inscription
  • Fonctionne sur tous les appareils

À propos de Testeur de robots.txt

Récupérez le robots.txt d'un site ou collez le vôtre, puis testez si un robot comme Googlebot peut accéder à une URL donnée. Les règles sont appliquées par user-agent et le chemin correspondant le plus long l'emporte. N'oubliez pas que robots.txt bloque l'exploration, pas l'indexation : des URL bloquées peuvent donc quand même apparaître dans les résultats de recherche.

Comment utiliser Testeur de robots.txt

  1. Saisissez l'adresse d'un site pour récupérer son robots.txt, ou collez le contenu du fichier.
  2. Saisissez le chemin d'URL que vous voulez tester.
  3. Choisissez un robot d'exploration et consultez s'il est autorisé ou bloqué.

Pourquoi utiliser cet outil ?

Aussi appelé

Questions fréquentes

Le fichier robots.txt cache-t-il une page à Google ?

Pas de façon fiable. Cela arrête l'exploration, mais une URL bloquée peut tout de même être indexée si elle est liée ailleurs. Pour garder une page hors des résultats, utilisez une balise noindex ou une protection par mot de passe.

Que signifie Disallow avec une barre oblique seule ?

Disallow: / indique au robot de ne visiter aucune page du site. Il est souvent laissé par erreur après un lancement en préproduction, testez-le donc avant la mise en ligne.

Quelle règle l'emporte si Allow et Disallow correspondent tous deux ?

Les moteurs de recherche comme Google suivent la règle la plus spécifique, qui est généralement le chemin correspondant le plus long. Testez ici l'URL exacte pour voir le résultat pour votre fichier.

Testeur de robots.txt est-il gratuit ?

Oui. Testeur de robots.txt est gratuit sur Toolipedia, sans inscription et sans filigrane.

Est-ce sûr ?

Oui. Tous les calculs se font dans votre navigateur et rien de ce que vous saisissez n’est envoyé à notre serveur.

Est-ce que ça fonctionne sur mon téléphone ?

Oui. L’outil fonctionne dans tout navigateur récent sur Android et iPhone, ainsi que sur tablette et ordinateur. Il n’y a rien à installer.

Faut-il un compte ?

Non. Ouvrez simplement la page et utilisez l’outil. Aucune inscription ni adresse e-mail n’est nécessaire.

Puis-je mettre Testeur de robots.txt sur mon propre site ?

Oui. Utilisez le bouton « Intégrer sur votre site » sous l'outil pour copier un court extrait de code et le coller dans votre page. C'est gratuit, sans compte, et l'outil continue de fonctionner dans votre page.

Outils similaires