El archivo robots.txt es la primera cosa que lee cualquier buscador al llegar a tu WordPress, y sin embargo muchos sitios funcionan con uno heredado, vacío o con bloqueos que sobran. Este generador construye el tuyo marcando casillas: bloquea la administración y el acceso, deja pasar el admin-ajax.php que la parte pública necesita, ahorra rastreo en búsquedas internas, añade tu sitemap y, si quieres, cierra la puerta a los rastreadores de IA más conocidos. El resultado se genera al momento, en tu navegador, listo para copiar o descargar y subir a la raíz de tu sitio. Generador de robots txt optimizado para wordpress seo gratis en IlmHunt, en línea y sin registro.
Qué hace el robots.txt y qué no hace
El robots.txt es un archivo de texto en la raíz del dominio que propone a los robots qué rutas no deben rastrear. Los buscadores serios lo respetan; no es una medida de seguridad (las rutas bloqueadas siguen existiendo y cualquiera puede ver el propio archivo), sino de eficiencia: evitas que Google gaste su presupuesto de rastreo en la administración, las búsquedas internas o los feeds, y declaras dónde está tu sitemap. En WordPress hay dos detalles importantes: permitir /wp-admin/admin-ajax.php aunque se bloquee el resto del admin —muchos temas y plugins lo invocan desde la parte pública— y no bloquear carpetas de CSS o JS, que Google necesita para renderizar tus páginas como las ve un humano.
Cómo se usa
- Marca o desmarca las reglas generales: vienen activadas las que convienen a casi cualquier WordPress (admin y login bloqueados, admin-ajax permitido, búsquedas internas fuera).
- Activa el bloqueo de rastreadores de IA si no quieres que tu contenido alimente modelos: elige cuáles de la lista; su bloque es total (Disallow: /).
- Ajusta tu sitemap con tu dominio real y añade, si las necesitas, líneas extra propias en el campo de texto.
- Copia el resultado o descárgalo como robots.txt y súbelo a la raíz del dominio (donde está wp-config.php), o pégalo en el editor de archivos de tu plugin de SEO.
- Compruébalo después en tu navegador visitando tudominio.com/robots.txt y, si quieres, con el probador de Search Console.
Ejemplo resuelto
Con las opciones que trae marcadas la herramienta y sitemap de ejemplo, el archivo generado es: User-agent: * / Disallow: /wp-admin/ / Allow: /wp-admin/admin-ajax.php / Disallow: /wp-login.php / Disallow: /?s=, y con el bloque de IA activado se añade un segundo grupo: User-agent: GPTBot / User-agent: ClaudeBot / User-agent: CCBot / User-agent: Google-Extended / Disallow: /, cerrando con la línea Sitemap: https://tusitio.com/sitemap_index.xml (con tu dominio real). Fíjate en el orden dentro del bloque general: primero el Disallow de /wp-admin/ y justo después el Allow específico de admin-ajax.php; los robots aplican la regla más específica, y ese Allow es el que salva los formularios y carritos que funcionan con AJAX en la parte pública.
Casos de uso frecuentes
- Estrenar un WordPress y dejar un robots.txt sensato desde el primer día, antes de que Google rastree la instalación.
- Limpiar un robots.txt heredado con reglas de plugins desinstalados o bloqueos que ya no tienen sentido.
- Decidir sobre los rastreadores de IA con nombres y apellidos, en vez de fiarlo a lo que traiga un plugin por defecto.
- Preparar el archivo para otra persona sin darle acceso al servidor: generas, descargas y le pasas el fichero.
Limitaciones honestas
- Todo ocurre en tu navegador: el generador no se conecta a tu sitio ni comprueba tu instalación; las opciones son tuyas y conviene revisar el archivo antes de subirlo.
- El robots.txt no protege contenido: bloquear una ruta no la oculta (de hecho, el archivo es público y enumera lo bloqueado). Lo privado de verdad va detrás de contraseña.
- Bloquear el rastreo no desindexa: una URL ya indexada puede seguir apareciendo (sin descripción) aunque la bloquees; para retirarla del índice hace falta noindex o la herramienta de retiradas de Search Console.
- El Crawl-delay Google lo ignora (su velocidad se gestiona en Search Console); lo respetan otros rastreadores como Bing, por eso se ofrece como opción y no como recomendación universal.
Preguntas frecuentes
¿Dónde se coloca exactamente el robots.txt en WordPress?
En la raíz del dominio: tudominio.com/robots.txt debe mostrarlo. Puedes subirlo por FTP o desde el administrador de archivos del hosting, o generarlo virtualmente desde tu plugin de SEO (Rank Math y Yoast tienen editor de robots.txt). Si existe un archivo físico, manda el físico; si usas el virtual, edítalo en el plugin y no subas otro.
¿Bloquear /wp-admin/ puede romper algo de mi web pública?
Solo si no permites admin-ajax.php: muchos temas, buscadores internos, carritos y formularios lo llaman desde páginas públicas aunque viva en la carpeta de administración. Por eso el generador añade siempre la línea Allow de admin-ajax.php tras el Disallow de /wp-admin/, y viene marcada por defecto.
¿Bloquear a GPTBot y compañía afecta a mi SEO en Google?
No: GPTBot, ClaudeBot o CCBot son rastreadores de empresas de IA, distintos de Googlebot. Bloquearlos no toca tu posicionamiento en Google. Google-Extended tampoco es Googlebot: controla el uso de tu contenido para entrenar modelos de Google, no tu presencia en el buscador. Ojo con no bloquear por error a Googlebot o a los robots que sí quieres recibir.
¿Necesito declarar el sitemap si ya lo envié en Search Console?
No es obligatorio, pero es gratis y ayuda a otros rastreadores (Bing, herramientas de auditoría) a encontrar tu mapa del sitio. Es una declaración pública, no un envío: no sustituye a dar de alta la propiedad en Search Console.
Cómo Generador de robots txt optimizado para wordpress seo
Más herramientas gratuitas
Herramientas relacionadas
Explora también estas herramientas gratuitas en español:
- Generador de Archivos htaccess para Redirecciones SEO 301: Reglas de Apache Listas para Pegar
- Conversor de Texto Plano a Formato Slug URL SEO Amigable para WordPress y Blogs
- Conversor de Mayúsculas a Minúsculas y Quitar Acentos Online: Seis Formatos en un Solo Clic
- Calculadora de Hash SHA256 Online Validador de Archivos: Huella de Textos y Ficheros sin Subir Nada a Ningún Servidor
- Extractor de Texto de Imágenes OCR Online Gratis en Español: de Foto a Texto sin Subir el Archivo
- Generador de Mapas de Sitio Sitemap XML para Páginas Estáticas: Crea y Descarga tu sitemap.xml
- Calculadora de Velocidad de Descarga y Tiempo de Transferencia de Archivos: Cuánto Tardará tu Descarga
- Generador de Metatags Open Graph para Facebook y Twitter: Herramienta SEO con Avisos de Longitud
Ver todas las herramientas gratis en español
Inserta esta herramienta en tu web — gratis
Copia el código de abajo para añadir esta herramienta funcional a tu propia página. Solo pedimos que mantengas el pequeño enlace de crédito que la acompaña.
