Los bots de la IA leen tu web miles de veces por cada visita que te mandan: cuáles dejar entrar
Hay bots de IA que entrenan modelos, otros que buscan para citarte y otros que entran cuando un usuario lo pide. Qué hace cada uno, qué pasa si lo bloqueas en robots.txt y cuánto rastrean por cada visita que mandan, según Cloudflare.
páginas rastreó Anthropic por cada visita que mandó a las webs en julio de 2025. Google rastreó 5.Cloudflare Radar, enero a julio de 2025
Los bots de las empresas de IA no son todos iguales, y bloquearlos no tiene el mismo efecto. Hay tres tipos: los que leen tu web para entrenar modelos (como GPTBot o ClaudeBot), los que la leen para poder citarte en sus respuestas (como OAI-SearchBot, Claude-SearchBot o PerplexityBot) y los que entran cuando un usuario lo pide. Si quieres salir en las respuestas de la IA, nunca bloquees los de búsqueda. Los de entrenamiento son una decisión tuya, con un coste a largo plazo. Y conviene saber lo que te llevas a cambio: según Cloudflare, Anthropic rastreaba unas 38.000 páginas por cada visita que mandaba a las webs.
El dato curioso: leen mucho, mandan poco
Durante dos décadas, el trato con Google fue sencillo: le dejas leer tu web y a cambio te manda visitas. Cloudflare, que ve pasar una parte enorme del tráfico de internet, se preguntó en 2025 si ese trato seguía en pie con la IA. Para cada empresa, contó cuántas páginas rastreaban sus bots por cada visita que llegaba a las webs desde sus productos.
Dos matices para leer bien estas cifras. Primero, cambian deprisa: la de Anthropic bajó un 87% entre enero y julio de 2025, y la de Perplexity subió. Segundo, Cloudflare calcula que alrededor del 80% de todo el rastreo de los bots de IA es para entrenar modelos, no para buscar. Y un bot que entrena no manda visitas por definición: no está respondiendo a nadie.
Por eso la pregunta útil no es «¿bloqueo a la IA sí o no?», sino «¿a qué bot, para qué?».
Los tres tipos de bot de IA
Cada empresa usa nombres distintos, pero todas siguen el mismo esquema. Este es el mapa con la documentación oficial de cada una:
| Empresa | Entrena modelos | Busca para citarte | Entra cuando un usuario lo pide |
|---|---|---|---|
| OpenAI (ChatGPT) | GPTBot | OAI-SearchBot | ChatGPT-User |
| Anthropic (Claude) | ClaudeBot | Claude-SearchBot | Claude-User |
| Perplexity | No entrena, según su documentación | PerplexityBot | Perplexity-User |
| Google (Gemini) | Google-Extended | Googlebot, el de siempre | — |
Qué pasa si bloqueas cada uno
Bots de entrenamiento: decides qué aprende el próximo modelo
Bloquear GPTBot, ClaudeBot o Google-Extended indica que tu contenido no se use para entrenar futuros modelos. No te saca de las respuestas que buscan en internet. El precio es otro, y llega más tarde: cuando alguien pregunta sin que el motor busque en la web, lo que sabe de tu marca viene de su entrenamiento. Si nunca te ha leído, sabrá menos de ti. En el caso de Google, además, Google-Extended cubre el uso de tu contenido para responder en la app de Gemini.
Bots de búsqueda: decides si te pueden citar hoy
Aquí no hay matices. OpenAI lo dice así en su documentación: las webs que bloquean OAI-SearchBot no se muestran en las respuestas de búsqueda de ChatGPT. Anthropic explica que bloquear Claude-SearchBot impide indexar tu contenido para su búsqueda, y Perplexity usa PerplexityBot para enlazar webs en sus resultados. Si bloqueas estos bots, te borras tú solo de las citas.
Bots de usuario: robots.txt no siempre manda
ChatGPT-User, Claude-User o Perplexity-User entran cuando una persona le pide al asistente que lea una página concreta. Como la visita la pide un usuario, OpenAI avisa de que las reglas de robots.txt pueden no aplicarse, y Perplexity dice que su bot de usuario generalmente las ignora. Anthropic, en cambio, dice que bloquear Claude-User impide que su sistema recupere tu contenido para responder.
Una configuración para cada caso
Si tu prioridad es que la IA te conozca y te cite, lo más sencillo es no bloquear a ninguno. Si quieres que no entrenen con tu contenido pero seguir saliendo citado, este robots.txt cierra el entrenamiento y deja abierta la búsqueda:
# Entrenamiento de modelos: fuera User-agent: GPTBot Disallow: / User-agent: ClaudeBot Disallow: / User-agent: Google-Extended Disallow: / # Búsqueda con IA: dentro User-agent: OAI-SearchBot User-agent: Claude-SearchBot User-agent: PerplexityBot Allow: / # Todo lo demás, como siempre User-agent: * Allow: /
- Bloquear «toda la IA» con una regla general sin mirar qué bots incluye. Es la forma más rápida de desaparecer de las citas.
- Copiar un robots.txt de un medio de comunicación. Un medio vive de que no le copien; una marca vive de que la recomienden.
- Pensar que robots.txt protege tu contenido de todo: los bots que actúan por un usuario pueden no seguirlo.
Cómo lo revisa GenScore
La Auditoría técnica de GenScore lee tu robots.txt en cada auditoría y te dice, bot por bot, si dejas entrar a GPTBot, OAI-SearchBot, Google-Extended, PerplexityBot y ClaudeBot, además de Bingbot. Si alguno está bloqueado, lo verás en dos sitios:
- En la Auditoría técnica, dentro del bloque Auditoría GEO, como un problema con el nombre del bot.
- En Visión general, en la franja «Prioridad 1 · tu web», junto a los otros frenos que impiden que te citen: páginas con noindex o que prohíben mostrar fragmentos.
GenScore marca también los bots de entrenamiento porque su objetivo es que la IA te conozca. Si has elegido bloquearlos a propósito, como en el ejemplo de arriba, verás ese aviso y puedes tomarlo como lo que es: una decisión tuya, no un error. La misma auditoría comprueba si tienes llms.txt, del que hablamos en la guía práctica de llms.txt.
Abre la puerta a quien te puede recomendar
Los bots de entrenamiento leen mucho y no mandan visitas, y es razonable pensarse si quieres alimentarlos. Los de búsqueda son otra cosa: son los que deciden si apareces citado cuando alguien pregunta por lo que vendes. Bloquear esos por error es uno de los fallos más caros y más fáciles de arreglar del GEO. Si quieres ir más allá del robots.txt, sigue con cómo conseguir que la IA te cite.
Equipo GenScore
Escribimos sobre visibilidad de marca en motores de IA a partir de los escaneos reales que ejecuta nuestra propia herramienta. Cuando no tenemos evidencia de algo, lo decimos.
Comprueba qué bots de IA dejas entrar
Prueba GenScore Pro 7 días, sin tarjeta: la Auditoría técnica revisa tu robots.txt bot por bot y te avisa si estás cerrando la puerta a ChatGPT, Gemini, Claude o Perplexity.
Analiza tu dominio