Agente de IA · septiembre 2026
meta-externalagent en robots.txt: quién lo bloquea
7.6% de las 166.024 webs del censo nombran a meta-externalagent en su robots.txt, y 92.9% de ellas lo bloquean.
Webs que lo nombran
- Sample
- n=166.024
- Coverage
- 100.0%
El rastreo de septiembre 2026, analizado buscando una regla de robots.txt que nombre a este user-agent, sobre la misma muestra del 1% del corpus que cualquier otra cifra de esta web: 166.024 webs. Antes se medía sobre el corpus entero y esta nota lo decía; pasó a la muestra mensual cuando el eje ganó una serie, así que ahora lleva el mismo margen que todo lo demás.
Webs que lo bloquean
- Sample
- n=166.024
- Coverage
- 100.0%
Qué hace meta-externalagent en realidad
Lo lleva Meta. Rastrea para entrenar los modelos de Meta. Bloquearlo no os cuesta tráfico: este rastreador no os manda a nadie.
Qué escribir en tu robots.txt
Pon la regla en su propio grupo. Un Disallow bajo User-agent: * es anterior a estos agentes y varios de ellos no lo consideran aplicable, que es también por lo que este censo no lo cuenta.
User-agent: meta-externalagent
Disallow: /User-agent: meta-externalagent
Allow: /