Lar
A Cloudflare tem como alvo rastreadores de IA mistos com novas regras de bloqueio em massa

A Cloudflare lançou uma atualização significativa em suas regras padrão de serviço, dando às empresas de IA de todo o setor até 15 de setembro para se adequarem. Todos os fornecedores de IA agora são obrigados a diferenciar entre rastreadores de busca, rastreadores de treinamento de modelos e rastreadores específicos para agentes de IA. Quaisquer rastreadores mistos que não consigam se diferenciar serão automaticamente bloqueados pelo sistema ao tentarem acessar páginas que contenham anúncios.
As novas regras têm amplo escopo, aplicando-se igualmente a novos clientes da plataforma, usuários existentes que criarem novos sites e a todos os sites de usuários gratuitos. Se um administrador de site desejar permitir rastreadores mistos, a única opção é ajustar manualmente a configuração de back-end — uma mudança que afeta diretamente a forma como as empresas de IA coletam conteúdo da web para materiais de treinamento.
Muitos administradores de sites não se importam em permitir que os mecanismos de busca tradicionais indexem seu conteúdo, mas não querem que sua propriedade intelectual seja coletada e usada para treinamento sem remuneração. A Cloudflare destacou que o rastreador do Google atende tanto à pesquisa quanto à coleta de dados de IA, tornando difícil para os sites permitirem a indexação de pesquisa e, ao mesmo tempo, bloquearem o treinamento de IA. Em resposta, o Google lançou uma ferramenta dedicada para robôs que permite que os sites bloqueiem o acesso para treinamento de IA sem afetar sua indexação de pesquisa.
No entanto, o rastreador principal do Google continuará coletando dados para os recursos de IA integrados ao mecanismo de busca, tornando difícil separar totalmente as necessidades de dados de busca e de IA. O CEO da plataforma observou que o tráfego de robôs há muito ultrapassou as visitas humanas, e o ecossistema do setor precisa urgentemente regulamentar vários comportamentos de rastreamento.
A Cloudflare continua aprimorando suas ferramentas de proteção de conteúdo, evoluindo da ferramenta anti-rastreador de IA de 2024 para um novo modelo de cobrança baseado em valor. Anteriormente, a plataforma cobrava com base no volume de rastreamento, mas agora adotou uma abordagem de pagamento por uso, calculando as taxas de acordo com a receita real que o conteúdo gera em aplicações de IA. Os dados indicam que mais da metade dos rastreadores de IA coletam repetidamente páginas que não foram atualizadas, e o mecanismo de pagamento pode reduzir o tráfego inválido ao mesmo tempo em que aumenta a renda dos criadores.
O plano de pagamento atual já foi testado com duas empresas de IA, permitindo que os administradores de sites recebam receita direta quando seu conteúdo é utilizado por produtos de IA. Em um ambiente em que as regulamentações de direitos autorais estão se tornando mais rígidas, as novas regras obrigam as empresas de IA a aumentar a transparência de suas atividades de rastreamento, dando aos criadores da web maior controle sobre seu conteúdo.
Artigo relacionado
Preview do Qwen3.5-Max lidera o LMArena à medida que os modelos de IA da China alcançam o primeiro lugar global
Em 20 de março, as mais recentes classificações da plataforma autorizada de testes cegos de grandes modelos LMArena revelaram que o mais novo modelo de pré-visualização de ponta da série Qwen da Alibaba, Qwen3.5-Max-Preview, apresentou desempenho exc
Startup apoiada por Marc Benioff visa resolver desafios na implantação de IA
As grandes empresas enfrentam desafios tão elevados na implementação de ferramentas de IA confiáveis que surgem equipes inteiras de engenheiros implantados diretamente no campo — especialistas embutidos dentro das empresas clientes para operacionaliz
A AliVideo revela o Wan3.0, oferecendo geração de vídeos ultra-longos e consistência multidimensional
Em 24 de agosto, a Alibaba apresentou o Wan3.0, seu mais recente modelo de geração de vídeo em larga escala. Este lançamento representa um grande avanço na tecnologia de vídeo da Alibaba, proporcionando melhorias significativas na duração, criação un
Recomendações de tópicos especiais relacionados
Comentários (0)

A Cloudflare lançou uma atualização significativa em suas regras padrão de serviço, dando às empresas de IA de todo o setor até 15 de setembro para se adequarem. Todos os fornecedores de IA agora são obrigados a diferenciar entre rastreadores de busca, rastreadores de treinamento de modelos e rastreadores específicos para agentes de IA. Quaisquer rastreadores mistos que não consigam se diferenciar serão automaticamente bloqueados pelo sistema ao tentarem acessar páginas que contenham anúncios.
As novas regras têm amplo escopo, aplicando-se igualmente a novos clientes da plataforma, usuários existentes que criarem novos sites e a todos os sites de usuários gratuitos. Se um administrador de site desejar permitir rastreadores mistos, a única opção é ajustar manualmente a configuração de back-end — uma mudança que afeta diretamente a forma como as empresas de IA coletam conteúdo da web para materiais de treinamento.
Muitos administradores de sites não se importam em permitir que os mecanismos de busca tradicionais indexem seu conteúdo, mas não querem que sua propriedade intelectual seja coletada e usada para treinamento sem remuneração. A Cloudflare destacou que o rastreador do Google atende tanto à pesquisa quanto à coleta de dados de IA, tornando difícil para os sites permitirem a indexação de pesquisa e, ao mesmo tempo, bloquearem o treinamento de IA. Em resposta, o Google lançou uma ferramenta dedicada para robôs que permite que os sites bloqueiem o acesso para treinamento de IA sem afetar sua indexação de pesquisa.
No entanto, o rastreador principal do Google continuará coletando dados para os recursos de IA integrados ao mecanismo de busca, tornando difícil separar totalmente as necessidades de dados de busca e de IA. O CEO da plataforma observou que o tráfego de robôs há muito ultrapassou as visitas humanas, e o ecossistema do setor precisa urgentemente regulamentar vários comportamentos de rastreamento.
A Cloudflare continua aprimorando suas ferramentas de proteção de conteúdo, evoluindo da ferramenta anti-rastreador de IA de 2024 para um novo modelo de cobrança baseado em valor. Anteriormente, a plataforma cobrava com base no volume de rastreamento, mas agora adotou uma abordagem de pagamento por uso, calculando as taxas de acordo com a receita real que o conteúdo gera em aplicações de IA. Os dados indicam que mais da metade dos rastreadores de IA coletam repetidamente páginas que não foram atualizadas, e o mecanismo de pagamento pode reduzir o tráfego inválido ao mesmo tempo em que aumenta a renda dos criadores.
O plano de pagamento atual já foi testado com duas empresas de IA, permitindo que os administradores de sites recebam receita direta quando seu conteúdo é utilizado por produtos de IA. Em um ambiente em que as regulamentações de direitos autorais estão se tornando mais rígidas, as novas regras obrigam as empresas de IA a aumentar a transparência de suas atividades de rastreamento, dando aos criadores da web maior controle sobre seu conteúdo.
Preview do Qwen3.5-Max lidera o LMArena à medida que os modelos de IA da China alcançam o primeiro lugar global
Em 20 de março, as mais recentes classificações da plataforma autorizada de testes cegos de grandes modelos LMArena revelaram que o mais novo modelo de pré-visualização de ponta da série Qwen da Alibaba, Qwen3.5-Max-Preview, apresentou desempenho exc
Startup apoiada por Marc Benioff visa resolver desafios na implantação de IA
As grandes empresas enfrentam desafios tão elevados na implementação de ferramentas de IA confiáveis que surgem equipes inteiras de engenheiros implantados diretamente no campo — especialistas embutidos dentro das empresas clientes para operacionaliz
A AliVideo revela o Wan3.0, oferecendo geração de vídeos ultra-longos e consistência multidimensional
Em 24 de agosto, a Alibaba apresentou o Wan3.0, seu mais recente modelo de geração de vídeo em larga escala. Este lançamento representa um grande avanço na tecnologia de vídeo da Alibaba, proporcionando melhorias significativas na duração, criação un











