Générateur robots.txt : créer un fichier robots.txt en ligne

Créez un robots.txt avec des règles Allow/Disallow pour chaque user-agent et votre sitemap, gratuitement, dans le navigateur et sans envoi de données.

Créez en quelques clics un fichier robots.txt, qui indique aux robots des moteurs de recherche quels chemins autoriser ou bloquer. Saisissez des règles Allow/Disallow pour chaque groupe de user-agents ainsi que l'emplacement de votre sitemap pour générer instantanément un fichier au format standard et le télécharger.

Chargement de l'outil…

Tout se passe à 100 % dans votre navigateur. Vos fichiers et ce que vous saisissez ne sont jamais envoyés sur un serveur.

Mode d'emploi

  1. Partez d'un préréglage « Tout autoriser / Tout bloquer » ou saisissez vos propres règles.
  2. Définissez le user-agent, puis listez les chemins Disallow/Allow, un par ligne.
  3. Ajoutez d'autres groupes si nécessaire et saisissez les URL des sitemaps, une par ligne.
  4. Récupérez le résultat avec « Copier robots.txt » ou « Télécharger le fichier ».

Questions fréquentes

Les chemins que je saisis sont-ils envoyés à un serveur ?
Non. La saisie des règles et la génération du robots.txt se font uniquement dans votre navigateur ; aucun chemin ni URL n'est transmis ou stocké sur un serveur.
Où dois-je déposer le fichier ?
Il doit être déposé à la racine de votre site sous le nom robots.txt, par exemple https://example.com/robots.txt. Les moteurs de recherche ne le reconnaîtront pas s'il se trouve dans un sous-dossier.
Disallow supprime-t-il complètement une page des résultats de recherche ?
Non. Disallow demande seulement aux robots de ne pas visiter la page ; cela ne bloque pas l'indexation en soi. Pour retirer une page des résultats de recherche de manière fiable, utilisez une balise meta noindex sur cette page ou protégez l'accès par authentification.

Tous les outils