Ai Bots raspando seus dados? Esta ferramenta gratuita dá a esses rastreadores irritantes

O surgimento de conteúdo gerado por IA, frequentemente referido como mídia sintética, trouxe vários desafios, incluindo a disseminação de desinformação, o uso não autorizado de trabalhos de artistas e uma queda na confiança em conteúdos online. No entanto, a Cloudflare potencialmente encontrou uma aplicação benéfica para a IA, com o objetivo de proteger o conteúdo original de ser explorado por empresas de IA.

Na quarta-feira, a Cloudflare apresentou o AI Labyrinth, uma ferramenta projetada para usar conteúdo gerado por IA para "desacelerar, confundir e desperdiçar os recursos" de rastreadores de IA não autorizados.

Estudos recentes mostraram que chatbots de IA, como ChatGPT e Perplexity, continuam acessando conteúdo de sites que bloquearam seus rastreadores. A Cloudflare destacou em seu anúncio que esses rastreadores geram mais de 50 bilhões de solicitações para sua rede diariamente, representando pouco menos de 1% de todas as solicitações web que observam. O método de bloqueio desses rastreadores é crucial.

A Cloudflare explicou que, embora possua várias ferramentas para identificar e bloquear rastreamentos de IA não autorizados, simplesmente bloquear esses bots pode alertar os atacantes, levando a um ciclo contínuo de táticas de evasão. Eles queriam desenvolver um novo método para deter esses bots indesejados sem sinalizar que foram detectados.

Quando a Cloudflare detecta uma solicitação de rastreamento não autorizada, o AI Labyrinth não apenas bloqueia o rastreador; em vez disso, ele vincula a várias páginas web geradas por IA que parecem autênticas o suficiente para enganar o rastreador, fazendo-o pensar que são legítimas. Dessa forma, o rastreador acredita erroneamente que obteve com sucesso o conteúdo desejado, enquanto os dados reais do site permanecem protegidos. Além disso, essa abordagem consome os recursos computacionais do rastreador, o que a Cloudflare considera uma vantagem.

O anúncio da Cloudflare detalhou que a ferramenta implanta automaticamente um conjunto de páginas vinculadas geradas por IA ao detectar atividade inadequada de bots, eliminando a necessidade de os clientes configurarem regras personalizadas.

Para criar essas páginas, a Cloudflare utilizou o Workers AI e um modelo de código aberto para produzir páginas sintéticas únicas, semelhantes às humanas, sobre vários tópicos com antecedência. Esse pipeline de pré-geração não apenas sanitiza o conteúdo para prevenir vulnerabilidades XSS, mas também o armazena em R2 para acesso mais rápido.

O AI Labyrinth exibe esses links apenas para rastreadores de IA, garantindo que o conteúdo permaneça oculto para visitantes humanos e não afete a estrutura, aparência ou SEO do site.

A Cloudflare enfatizou seu compromisso em não contribuir para a disseminação de desinformação, garantindo que o conteúdo gerado seja factual e relacionado a tópicos científicos, mas irrelevante para o site que está sendo rastreado.

Além disso, a Cloudflare vê o AI Labyrinth como um potencial honeypot para identificar novos rastreadores ilícitos. Eles observaram que visitantes humanos genuínos são improváveis de navegar por "um labirinto de nonsense gerado por IA", permitindo que a ferramenta detecte novos bots com base em padrões de cliques. Essa percepção ajudará o AI Labyrinth a identificar atores maliciosos de forma mais eficaz.

Como os bots se tornaram hábeis em detectar técnicas tradicionais de honeypot, a Cloudflare planeja evoluir o AI Labyrinth, criando redes de URLs vinculadas mais realistas, que são mais difíceis de serem identificadas por programas automatizados.

Para editores ou indivíduos preocupados com o uso de seu conteúdo para treinar IA ou com a má representação por chatbots, o AI Labyrinth pode ser uma ferramenta valiosa.

Todos os clientes da Cloudflare, incluindo aqueles no plano gratuito, podem ativar o AI Labyrinth hoje acessando seu painel da Cloudflare, navegando até a seção de gerenciamento de bots e ativando a opção AI Labyrinth.

[ttpp]