En el navegador · Buscadores
Crear un robots.txt en segundos
El archivo robots.txt le dice a los rastreadores qué pueden ver de tu sitio y dónde está tu sitemap. Un error de sintaxis puede esconder tu web entera de Google, así que conviene armarlo bien. Este generador lo construye en tu navegador mientras eliges opciones: declaras tu sitemap, decides qué rastreadores de IA bloquear, y copias o descargas el archivo listo. Nada se envía a ningún servidor.
1. Genera y descarga tu robots.txt
El texto del archivo se construye en vivo dentro de la página conforme marcas opciones. No hay que enviar formularios ni esperar.
- Abre el generador y escribe la URL de tu sitemap, normalmente
https://tusitio.com/sitemap.xml. Quedará declarada en el archivo. - En Rastreadores de IA, marca solo los que quieras bloquear del entrenamiento (GPTBot, Google-Extended, CCBot, Bytespider). Si no marcas ninguno, tu sitio queda abierto a todos.
- Revisa el resultado que aparece debajo; cambia cualquier opción y el texto se actualiza al instante.
- Pulsa Copiar para llevártelo al portapapeles, o Descargar robots.txt para guardar el archivo.
- Sube ese archivo a la raíz de tu sitio, de modo que quede accesible en
https://tusitio.com/robots.txt.
Cómo se lee un robots.txt sencillo
El archivo base permite que todos los rastreadores entren y apunta a tu sitemap. Se ve así:
User-agent: *
Allow: /
Sitemap: https://tusitio.com/sitemap.xmlCada bloque que agregues para bloquear un rastreador de IA añade su propia sección con Disallow: / bajo ese agente. Nuestra postura: si quieres aparecer en las respuestas de IA, no bloquees, pero la decisión es tuya y aquí tienes el control.
Tareas relacionadas
Preguntas frecuentes
¿Bloquear los rastreadores de IA me quita visibilidad?
Puede hacerlo. Bloquear GPTBot o Google-Extended impide que esos sistemas usen tu contenido para entrenar y, en algunos casos, para citarte en sus respuestas. Si la visibilidad en buscadores de IA te importa, conviene no bloquearlos; si prefieres que no usen tu material, márcalos.
¿El generador guarda mi dominio o mi sitemap?
No. Lo que escribes solo existe en tu navegador para armar el texto; no se envía ni se almacena en ningún servidor. Puedes generar el archivo, copiarlo y cerrar la pestaña sin dejar rastro en ningún lado.
¿Dónde va el archivo una vez generado?
Siempre en la raíz del dominio, accesible como https://tusitio.com/robots.txt. Los rastreadores solo lo buscan ahí; si lo colocas en una subcarpeta, no lo encontrarán y será como si no existiera.