Générateur de robots.txt
Créez les règles d’autorisation, d’interdiction, de délai et de sitemap pour robots.txt.
Un chemin par ligne, commençant par /. Encodez les espaces en %20 et # en %23.
robots.txt contrôle l’exploration, pas l’accès privé ni la désindexation. Google ignore Crawl-delay. Un agent par ligne (lettres, _, -, ou *).
robots.txtVérifiez avant publication à la racine. Les modifications manuelles sont exportées ; modifier le formulaire régénère le fichier.