Agente de IA · septiembre 2026
GPTBot en robots.txt: quién lo bloquea
10.0% de las 166.024 webs del censo nombran a GPTBot en su robots.txt, y 86.0% de ellas lo bloquean.
Webs que lo nombran
- Sample
- n=166.024
- Coverage
- 100.0%
El rastreo de septiembre 2026, analizado buscando una regla de robots.txt que nombre a este user-agent, sobre la misma muestra del 1% del corpus que cualquier otra cifra de esta web: 166.024 webs. Antes se medía sobre el corpus entero y esta nota lo decía; pasó a la muestra mensual cuando el eje ganó una serie, así que ahora lleva el mismo margen que todo lo demás.
Webs que lo bloquean
- Sample
- n=166.024
- Coverage
- 100.0%
Qué hace GPTBot en realidad
Lo lleva OpenAI. Rastrea para entrenar los modelos de OpenAI. Bloquearlo no os quita de las respuestas de ChatGPT: eso son OAI-SearchBot y ChatGPT-User, que son tokens distintos. Bloquearlo no os cuesta tráfico: este rastreador no os manda a nadie.
Qué escribir en tu robots.txt
Pon la regla en su propio grupo. Un Disallow bajo User-agent: * es anterior a estos agentes y varios de ellos no lo consideran aplicable, que es también por lo que este censo no lo cuenta.
User-agent: GPTBot
Disallow: /User-agent: GPTBot
Allow: /