Generador Robots.txt

Genera archivos robots.txt para controlar el rastreo de motores de búsqueda. Añade reglas allow/disallow y referencias de sitemap.