Generador de robots.txt
Crea reglas de permiso, bloqueo, retraso de rastreo y sitemap para robots.txt.
Una ruta por línea que empiece con /. Codifica espacios como %20 y # como %23.
robots.txt controla el rastreo, no protege páginas privadas ni garantiza su retirada de búsquedas. Google ignora Crawl-delay. Un agente por línea (letras, _, -, o *).
robots.txtRevisa antes de publicar en la raíz. Se exportan las ediciones manuales; cambiar el formulario regenera el archivo.