Newsletter Subscribe
Enter your email address below and subscribe to our newsletter
[forminator_form id="25163"]

theverge.com.engadget.com.engadget.com.Cuatro de los mayores desarrolladores de IA respetarán una señal única en robots.txt que permite a los sitios web rechazar el uso de su contenido para el entrenamiento de IA generativa. Los editores ya no necesitarán bloquear el rastreador de cada empresa uno por uno. Google Alphabet Inc. , OpenAI, Anthropic y Microsoft se comprometieron el viernes 30 de octubre a apoyar un "token de política" compartido propuesto en el Internet Engineering Task Force, informó The Verge, citando reportes previos de Search Engine Roundtable.theverge.com
Las empresas lo activarán en momentos distintos. Anthropic ya ha comenzado a admitir la directiva, Microsoft empezará el 1 de febrero de 2027, Google planea seguir a principios de 2027 y OpenAI ha prometido implementarlo en los próximos meses, según Engadget.engadget.com
La propuesta proviene de Kevin Kelley, líder técnico de estándares de Anthropic. Los propietarios de sitios añaden un grupo en robots.txt con "__usage_ai-training" como agente de usuario, seguido de reglas de "Disallow", y pueden usar líneas de "Allow" para abrir carpetas específicas, como un kit de prensa, para el entrenamiento. El token cubre solo el entrenamiento. No es una directiva de rastreo y no cambia la indexación de búsqueda.engadget.com
En una publicación en el sitio web de OpenAI, la empresa lo calificó como un "esfuerzo voluntario" y señaló que la nueva señal "no reemplazará los controles que ya ofrecemos a través de robots.txt". John Mueller de Google dijo que los sitios web podrán usar un token compartido "para establecer preferencias generales entre los proveedores de IA participantes". Añadió que si un sitio se excluye con el token y no nombra a Google-Extended, Google lo tratará como un bloqueo de Google-Extended, según Search Engine Land.openai.com+1
Microsoft fue más allá que los otros tres. Bing ofrecerá configuraciones separadas para el entrenamiento de IA y la fundamentación de IA, que cubre el uso de páginas para generar respuestas de IA. Una opción de "Fundamentación limitada" permitirá a los sitios admitir los productos de IA propios de Microsoft mientras rechazan sus servicios de fundamentación de terceros. Microsoft también estableció un cronograma que va desde controles temporales el 15 de diciembre de 2026 hasta una fecha límite del 1 de marzo de 2027 para los sitios que aún usan etiquetas antiguas NoArchive o NoCache. Según el blog de Bing, ninguna de estas opciones afecta la elegibilidad para los resultados de búsqueda regulares.seroundtable.com+1
La directiva no puede deshacer la recopilación pasada, ya que el contenido ya reunido permanece en manos de las empresas. Tampoco impide que los rastreadores obtengan páginas y el cumplimiento sigue siendo voluntario. Meta dijo que apoya la idea pero no se ha comprometido a implementarla. El borrador en sí sigue siendo una propuesta en desarrollo del grupo de trabajo de Preferencias de IA del IETF en lugar de un estándar finalizado.zglg.work+3