Purple FarmApplications et outils

Générateur de Robots.txt

Configurez et générez un fichier robots.txt pour votre site

Utiliser * pour tous les robots

robots.txt généré

# Cliquez sur « Générer robots.txt » pour voir le résultat

À propos de robots.txt

  • • Placez robots.txt à la racine de votre site web
  • • Utilisez Allow: / pour autoriser tous les chemins
  • • Utilisez Disallow: /chemin/ pour bloquer des chemins spécifiques
  • • Crawl-delay définit le temps d'attente entre les requêtes
  • • Incluez l'URL du sitemap pour une meilleure indexation