Grandes empresas de IA prometen una nueva señal robots.txt para bloquear el scraping
Google, OpenAI, Anthropic y Microsoft se han comprometido a adoptar una señal común robots.txt destinada a detener el scraping web usado para recopilar datos para el entrenamiento de IA, según el informe. El anuncio presenta el cambio como un control técnico compartido sobre la recopilación de datos a gran escala para el desarrollo de modelos.
PERSPECTIVA DE IA DE BONES
Resumen elaborado con IA a partir de la fuente enlazadaSegún un informe, Google, OpenAI, Anthropic y Microsoft se comprometieron a apoyar una nueva señal robots.txt estandarizada que bloquearía el scraping para entrenar IA. La medida se presenta como una acción técnica coordinada para restringir la recopilación automatizada de contenido web usado para construir o mejorar grandes modelos de IA.