Grandes empresas de IA apoiam novo padrão para desistir de raspagem de dados

OpenAI, Google, Microsoft e Anthropic anunciaram que adotarão um novo padrão que permitirá aos editores desistir de serem raspados por sistemas de IA. Esta iniciativa, reportada pelo Search Engine Roundtable, permite que os operadores de sites apliquem suas preferências de treinamento de IA em várias empresas de IA, em vez de fazê-lo individualmente. O sinal 'token de política' compartilhado, proposto por Kevin Kelley, um líder técnico da Anthropic, faz parte da Internet Engineering Task Force (IETF). Ele será integrado ao arquivo robots.txt de um site, que tradicionalmente sinaliza quais rastreadores web podem raspar um site. Esta iniciativa visa fornecer maior controle sobre como o conteúdo é usado para treinamento de IA. A medida é vista como um passo significativo em direção à padronização da ética da IA e das práticas de uso de dados em toda a indústria. O novo padrão foi projetado para simplificar o processo para os editores comunicarem suas preferências às empresas de IA participantes. Ao aproveitar o framework robots.txt existente, o token de política oferece um método centralizado para gerenciar permissões de raspagem. Espera-se que esta abordagem reduza a complexidade para os operadores de sites que anteriormente tiveram que gerenciar várias configurações para diferentes sistemas de IA. A colaboração entre as principais empresas de IA destaca um crescente consenso sobre a necessidade de transparência e controle nas práticas de dados de IA. À medida que a tecnologia continua a evoluir, é provável que padrões semelhantes desempenhem um papel crucial na formação do cenário ético do desenvolvimento de IA.