Cloudflare lança recurso para bloquear robôs de treinamento de IA, permitindo que mecanismos de busca acessem sites
A Cloudflare lançou uma nova funcionalidade chamada 'Disallow AI Training', que permite aos administradores de sites bloquear robôs de treinamento de IA, ao mesmo tempo em que permitem que os mecanismos de busca acessem seus sites. Grandes empresas de tecnologia, incluindo Apple, Google e Microsoft, comprometeram-se a aderir a esta configuração.
Uma vez ativada, a funcionalidade permitirá que robôs de busca e treinamento de IA utilizem a funcionalidade, desde que sejam marcados como 'Accountable'. Outros robôs de treinamento de IA permanecerão bloqueados, e a Cloudflare alertou que bloquear estes robôs pode afetar o posicionamento nos resultados de pesquisa do site.
A maioria dos clientes não será afetada, pois os sites que anteriormente estavam configurados para 'Block' ou 'Block on pages with ads' passarão automaticamente para a nova configuração. Além disso, o Google está prestes a lançar uma ferramenta de transparência de nível de URL, enquanto a Apple está a desenvolver a sua própria ferramenta de nível de URL.
A Microsoft planeia suportar a rejeição de robôs de treinamento de IA através do arquivo robots.txt em início de 2027.