Google, OpenAI y Microsoft pactan en robots.txt una señal única para frenar el entrenamiento de IA

Google impulsa un control común en robots.txt para que los sitios expresen una sola preferencia frente al entrenamiento de IA de varios proveedores.

01 de noviembre de 2026 a las 16:17h
Google, OpenAI y Microsoft pactan en robots.txt una señal única para frenar el entrenamiento de IA
Google, OpenAI y Microsoft pactan en robots.txt una señal única para frenar el entrenamiento de IA

Añadir Mangas Verdes como fuente preferida de Google de forma gratuita.

Mantente informado con las últimas noticias de actualidad.

Activar ahora

Hasta ahora, un editor que quisiera frenar el uso de sus páginas para entrenar inteligencia artificial debía lidiar con reglas distintas según quién rastreara la web. Google quiere que eso empiece a cambiar.

El 30 de octubre, John Mueller, defensor de la Búsqueda de Google, presentó en el blog Google Search Central un plan para admitir en robots.txt un control compartido del entrenamiento de IA. La idea consiste en dar a los propietarios de sitios una sola forma de expresar preferencias para varios proveedores.

Google quiere que una sola señal valga para varios rastreadores

El movimiento no parte de cero. Google lo apoya sobre Google-Extended, disponible desde 2023, y lo vincula al trabajo del grupo AI Preferences de la Internet Engineering Task Force, donde se intenta fijar un lenguaje común para algo que hasta ahora avanzaba a base de soluciones parciales.

El token propuesto para esa preferencia compartida es __usage_ai-training, descrito en un borrador de Internet fechado el 30 de octubre de 2026. Ese texto, titulado robots.txt y noindex, sigue la vía de estándares y vence el 3 de mayo de 2027.

Kevin Kelley, de Anthropic, figura como autor del borrador y definió ese uso con una fórmula muy concreta. Habla de usar un recurso para modificar los parámetros aprendidos de un modelo de IA generativa.

Anthropic ya ha empezado a mover ficha.

El propio Kelley anunció el 30 de octubre el borrador en la lista de correo ai-control de la IETF y escribió que Anthropic ya había comenzado a implementar su compatibilidad. No es un matiz menor, porque convierte una discusión técnica en una señal de adopción real.

OpenAI y Microsoft se suman, pero con calendarios distintos

OpenAI asumió un compromiso paralelo ese mismo 30 de octubre. La empresa dijo que respetará la señal común de robots.txt, que prevé implementarla en los próximos meses y que mantendrá vigentes los controles que ya aplica a sus rastreadores.

Microsoft también anunció su adopción a través de Krishna Madhavan, gerente principal de producto de Microsoft Bing, en una entrada publicada el 30 de octubre. La compañía aplicará la preferencia compartida a sitios y rutas, y además la extenderá al nivel de página mediante etiquetas meta y encabezados de respuesta HTTP.

Ahí aparece una diferencia práctica. Microsoft incorpora en su preferencia de fundamentación la opción DisallowExtended, que limita el uso a experiencias operadas por la propia empresa como AI Mode, AI Overview, Copilot y Microsoft 365.

Microsoft sostuvo además que fue la primera empresa en ofrecer a los editores controles para entrenamiento y fundamentación de IA, al recordar las etiquetas NoArchive y NoCache introducidas en 2023. Las nuevas preferencias reemplazarán esas dos etiquetas y entrarán en vigor a partir del 1 de febrero de 2027.

La transición deja poco margen para los sitios web

Google prevé interpretar la exclusión de un sitio mediante el token compartido como una desautorización de Google-Extended cuando no exista una indicación explícita distinta. Dicho de otra forma, la señal común no solo suma una capa nueva, también reordena cómo leer controles que ya estaban en circulación.

Google enmarca la propuesta como respuesta a comentarios de editores, grupos de la sociedad civil, organismos reguladores y otras partes interesadas. También la presenta como una medida coherente con el Código de buenas prácticas de la UE para proveedores de modelos de IA de propósito general dentro de la Ley de IA.

Google prevé admitir el nuevo control en 2027 junto con otros proveedores de IA. La foto que deja octubre no es la de una norma cerrada, sino la de varias compañías intentando llegar a una gramática común antes de que cada editor tenga que aprender un dialecto técnico distinto.

En el caso de Microsoft, el calendario ya trae fechas difíciles de ignorar. El 15 de diciembre de 2026 Bing Webmaster Tools habilitará preferencias temporales de transición para la fundamentación.

Después llega el tramo más delicado, porque los sitios deberán publicar sus nuevas preferencias y registrar una preferencia temporal antes del 1 de marzo de 2027. Ese día, NoArchive y NoCache dejarán de interpretarse como preferencias para entrenamiento o fundamentación, una mudanza técnica que recuerda a los cambios de control en IA cuando una etiqueta antigua deja de significar lo que muchos webmasters creen.

Las preferencias temporales de Microsoft seguirán vigentes hasta que se vuelva a rastrear una página y se detecte la nueva preferencia, o hasta el 30 de septiembre de 2027. Entre el borrador que caduca el 3 de mayo de 2027 y la transición que expira el 30 de septiembre, la pelea por algo tan simple como decir no todavía depende de varias fechas y de que los rastreadores las lean igual.

Sobre el autor
Redacción
Ver biografía