Anthropic, OpenAI, Google e Microsoft anunciaram apoio conjunto a uma regra padronizada na internet para facilitar o bloqueio à coleta de dados por inteligência artificial. A iniciativa, revelada pelo Nieman Lab, busca simplificar, via comando no arquivo robots.txt, a forma como portais de notícias e criadores de conteúdo impedem que seus textos sejam usados no treinamento de chatbots de IA.
O fim do trabalho manual para barrar cada robô
Hoje, cada portal precisa bloquear rastreadores de IA um a um no código. Para impedir o uso não autorizado de seus artigos, administradores de páginas são obrigados a inserir regras específicas para cada ferramenta no arquivo robots.txt (código que orienta o que robôs de busca podem ou não ler na página).
A novidade cria uma chave universal para sinalizar a recusa de uma só vez. O mecanismo unificado foi proposto pelo engenheiro Kevin Kelley junto à IETF (Internet Engineering Task Force, organização que desenvolve padrões técnicos da internet) e permite comunicar a mesma decisão a todas as empresas participantes de forma simultânea.