GEO e IA · 8 min de lectura

¿ChatGPT puede leer tu sitio? Cómo revisar los rastreadores de IA en tu robots.txt

Si los rastreadores de búsqueda de los asistentes no pueden entrar, no te pueden citar. Cómo saberlo y qué permitir.

¿Cómo saber si ChatGPT puede leer tu sitio?

Abre tu robots.txt (tudominio.com/robots.txt) y busca reglas para OAI-SearchBot, el rastreador de la búsqueda de ChatGPT, y para el comodín «User-agent: *». Si alguna regla aplicable dice «Disallow: /», ChatGPT no puede leer tu sitio para su búsqueda. Después revisa que tu contenido esté en el HTML y no solo en JavaScript.

¿Qué rastreadores usan los asistentes de IA?

EmpresaRastreadorPara qué sirve¿Respeta robots.txt?
OpenAIOAI-SearchBotMostrar sitios en la búsqueda de ChatGPTSí
OpenAIGPTBotContenido que puede usarse para entrenar modelosSí
OpenAIChatGPT-UserVisitas que pide una persona dentro de ChatGPTPuede no aplicar: lo pide un usuario
PerplexityPerplexityBotMostrar y enlazar sitios en sus respuestasSí
PerplexityPerplexity-UserVisitas que pide una personaEn general no
AnthropicClaude-SearchBot / ClaudeBot / Claude-UserBúsqueda / entrenamiento / visitas de usuarioSí, según Anthropic
GoogleGooglebot + token Google-ExtendedSearch (incluye AI Overviews) / entrenamiento y grounding de GeminiSí

Las fuentes son la documentación de cada empresa: OpenAI, Perplexity, Anthropic y Google. Cambian con el tiempo: revísalas antes de tocar tu robots.txt.

¿Cómo revisarlo paso a paso?

Cinco minutos

  1. 01

    Abre tu robots.txt

    Escribe tudominio.com/robots.txt en el navegador. Si no existe, nadie está bloqueado por ese archivo.

  2. 02

    Busca cada nombre

    Busca OAI-SearchBot, PerplexityBot, Claude-SearchBot y Google-Extended. Anota qué dice debajo de cada uno.

  3. 03

    Revisa el comodín

    Un «User-agent: *» con «Disallow: /» bloquea a todos los que no tengan su propio grupo de reglas.

  4. 04

    Revisa tu firewall

    Algunos servicios de CDN o seguridad bloquean bots de IA aunque robots.txt los permita. Revisa esa configuración.

  5. 05

    Mira el HTML

    Ver código fuente: si tu texto principal no aparece ahí, un rastreador que no ejecuta JavaScript no lo verá.

¿Qué conviene permitir y qué bloquear?

Son dos decisiones separadas. Aparecer en respuestas depende de los rastreadores de búsqueda; el entrenamiento, de otros. Puedes permitir unos y bloquear otros. Este ejemplo deja entrar a la búsqueda y bloquea el entrenamiento:

robots.txt
User-agent: OAI-SearchBot
Allow: /

User-agent: PerplexityBot
Allow: /

User-agent: Claude-SearchBot
Allow: /

User-agent: GPTBot
Disallow: /

User-agent: ClaudeBot
Disallow: /

User-agent: Google-Extended
Disallow: /

User-agent: *
Allow: /

¿Por qué el JavaScript puede esconder tu contenido?

Google puede ejecutar JavaScript, aunque en un segundo paso. Otros rastreadores pueden leer solo el HTML inicial. Si tus servicios, precios o preguntas frecuentes se cargan después, pon al menos lo esencial en el HTML del servidor. La guía de llms.txt explica una forma complementaria de darles a los asistentes un mapa de tu sitio, y la auditoría SEO cubre el resto de la revisión técnica.

Herramienta gratis · Auditoría GEO gratis

La herramienta «¿La IA puede leer tu sitio?» de Market OS revisa tu robots.txt, tu firewall y tu HTML contra cada rastreador y te dice quién entra y quién no.

Avísame cuando esté lista →

Preguntas frecuentes

¿Bloquear GPTBot me saca de ChatGPT?

No de su búsqueda. OpenAI indica que la búsqueda depende de OAI-SearchBot y que cada ajuste es independiente.

¿Qué pasa si no tengo robots.txt?

Ningún rastreador está bloqueado por ese archivo. Aun así conviene tenerlo para declarar tu sitemap.

¿Robots.txt protege información privada?

No. Es una petición que los rastreadores respetuosos siguen; lo privado debe protegerse con contraseña o no publicarse.

¿Cuánto tardan en notar un cambio en robots.txt?

Depende de cada empresa. OpenAI indica que sus cambios pueden tardar alrededor de 24 horas en aplicarse.

¿Debo permitir los rastreadores de entrenamiento?

Es una decisión de negocio. No afecta a que te citen en búsqueda; afecta a si tu contenido puede usarse para entrenar modelos.

Fuentes

Escrita por Samuel Hinojosa, WITS · Actualizada el 1 de noviembre de 2026 · Markdown

El personaje de Market OS, con bata de laboratorio, saluda frente a la Minerva de Guadalajara en un día soleado.

Revisión con WITS

¿Quieres que lo revisemos contigo?

La herramienta gratis te dice qué falta. Si quieres que WITS priorice y corrija contigo, cuéntanos qué quieres lograr.

WhatsApp +52 56 6107 7931 · ventas@wits.mx

Escríbenos por WhatsApp