Tornando a busca de IA mais inteligente

A busca impulsiona a maioria das experiências na web. É assim que fazemos as coisas e como quase tudo na web é encontrado — os criadores, os comerciantes, a resposta para o que você acabou de digitar em uma caixa. Por quase 30 anos, essa jornada de descoberta funcionou em um simples acordo: deixe um mecanismo de busca rastrear seu conteúdo e ele lhe enviará visitantes. Você transformou esses visitantes em um negócio — através de anúncios, assinaturas ou apenas o público em si. Ser descoberto e ser pago eram a mesma coisa. Um ano atrás, no primeiro Dia da Independência do Conteúdo, traçamos uma linha para defender esse acordo na era da IA. Mas uma linha na areia foi apenas o primeiro passo. Desde então, a prevalência da busca por IA na vida dos consumidores só acelerou, já que mais de 50% do tráfego online é não humano. A ameaça não é mais um punhado de crawlers de treinamento que você pode bloquear; é a busca em si sendo reconstruída em torno de respostas de IA.

Os motores de resposta de hoje leem sua página e entregam ao usuário um resumo, então a visita — e a receita que dependia dela — não são mais necessárias. Vemos isso em primeira mão, e pesquisas independentes confirmam: um estudo do Pew Research Center de 2025 descobriu que quando o Google mostra um resumo de IA, os usuários clicam em um link de resultado de busca tradicional apenas 8% das vezes (cerca da metade da frequência quando não há resumo) e clicam em um link dentro do resumo apenas 1% das vezes. Isso deixa nossos clientes em uma situação difícil: optar por não participar da IA e ser difícil de encontrar, ou optar por participar e entregar valor significativo aos usuários enquanto vê cada vez menos em troca. Nossos clientes querem ser encontrados e compensados pelo valor que fornecem, e agora estão forçados a escolher.

Hoje, anunciamos novas opções de bot para ajudar nossos clientes a controlar melhor quem pode acessar seu site e o que podem fazer com ele. Mas bloquear foi apenas o primeiro passo: dizer "não" protege o conteúdo sem reconstruir os modelos de negócios que o sustentam. Portanto, é hora de começar a construir o novo modelo econômico da Internet, começando pela busca.

A transparência e o controle são a base, mas mais é necessário. Em 2025, estabelecemos nossa fundação por meio de um conjunto de princípios responsáveis para bots de IA: os bots devem ser transparentes sobre quem são e para que servem, respeitar as escolhas dos proprietários dos sites e agir de boa fé. Nossas ferramentas mantêm os bots dentro desse padrão. Mas fazer cumprir um bom comportamento dos bots não melhora a busca por IA para as pessoas que dependem dela, e não devolve um dólar ao criador cujo trabalho tornou a resposta possível. Podemos fazer mais do que ajudar a web a dizer "não"; podemos ajudar a reconstruir o que ela diz "sim".

Portanto, hoje, estamos anunciando duas iniciativas que passam da defesa para o ataque e começam a colocar ambas as partes daquele antigo acordo de volta juntas.

Faça a busca por IA mais inteligente: Ao usar os sinais que vemos em nossa rede global, como o que é novo, o que é de alta qualidade e o que realmente mudou, podemos ajudar os motores de resposta a destacar o conteúdo mais relevante e reduzir o rastreamento indesejado. As pessoas que buscam obtêm melhores respostas, enquanto os custos são reduzidos tanto para as empresas de IA quanto para os proprietários de sites, se as páginas da web forem recarregadas apenas quando mudaram.

Compense os criadores pelo valor que fornecem: Quando seu trabalho é usado para responder à pergunta de alguém, você deve ser recompensado em vez de apenas ser raspado gratuitamente. E você deve ser capaz de ver o que está sendo usado e o que as pessoas estão perguntando. Isso deve ser uma verdadeira fonte de receita e um incentivo para continuar produzindo conteúdo original que vale a pena encontrar.

Hoje estamos lançando um programa de pesquisa para tornar a busca por IA mais inteligente e parar nossos clientes de arcar com os custos de rastreamentos que não produzem nada novo.

Mais de 20% da web está atrás da rede da Cloudflare, o que nos dá uma perspectiva única. Podemos dizer quais páginas realmente mudaram e quais as pessoas e agentes estão se aglomerando. Através deste programa, exploraremos o uso de sinais que nossos clientes escolheram compartilhar sobre a frescura de seu conteúdo e os combinaremos com nossa própria visão sobre os fluxos de tráfego, tanto humanos quanto bots. Para os motores de resposta, isso é um roteiro para conteúdo de alta qualidade. Para nossos clientes, fornece uma visão do que os usuários estão realmente perguntando e como seu conteúdo aparece nos resultados de IA. O objetivo é medir duas coisas: quanto esses sinais ajudam os motores de resposta a destacar conteúdo mais fresco e de maior qualidade, e quanto rastreamentos desnecessários eles eliminam.

Esse segundo benefício, cortar rastreamentos desnecessários, é maior do que parece. Os dados da Cloudflare sugerem que mais de 50% do tráfego de rastreamento de bons bots vai para re-obter páginas que não mudaram — e esse número provavelmente aumentará à medida que os volumes de rastreamento aumentarem. Um sinal que apenas diz "nada mudou aqui" permite que um rastreador pule a viagem. Isso economiza o processamento do motor de resposta. Mais importante, economiza os proprietários de sites de atender e pagar por solicitações que nunca precisaram ser feitas.

O programa é neutro por design: nosso objetivo é fazê-lo funcionar para todos os motores de resposta dispostos a jogar limpo. É limitado à busca. Não estamos compartilhando nenhum conteúdo, e nada é usado para treinar modelos de fundação. Pretendemos publicar o que aprendemos, incluindo os benefícios para os proprietários de sites, como melhor descobribilidade de conteúdo e redução da pressão sobre os servidores. Planejamos tornar a capacidade amplamente disponível ainda este ano e reduzir o rastreamento desnecessário em nossa rede.

No ano passado, lançamos o Pagamento Por Rastreamento para que os editores pudessem cobrar as empresas de IA pelo rastreamento de seu conteúdo. Foi um verdadeiro começo, mas o rastreamento é uma medida crua de valor. Uma única página pode ser rastreada uma vez e depois citada em milhares de respostas, ou rastreada repetidamente e nunca usada. Os criadores querem ser pagos de forma justa pelo valor que fornecem.

Portanto, estamos começando a moldar o Pagamento Por Rastreamento em Pagamento Por Uso. Estamos realizando experimentos com as principais empresas de IA, como Ceramic.ai e You.com, e o arranjo é simples: as organizações podem trazer seus modelos de pagamento e escalá-los facilmente para os proprietários de conteúdo em toda a rede da Cloudflare.

A Ceramic construiu o que chama de modelo "pagamento por consulta", para que os editores que optarem possam ser pagos quando seu conteúdo aparecer nos resultados de busca da Ceramic. Isso significa que o pagamento é projetado para seguir o valor que o trabalho entrega, em vez do número de vezes que um rastreador acontece de buscá-lo.

“Para escalar o futuro da busca por IA, precisamos de um parceiro com grande alcance e um compromisso compartilhado com a transparência e a compensação justa”, diz Anna Patterson, fundadora e CEO da Ceramic.ai. “A Cloudflare nos permite escalar nossas operações de forma fácil e programática. Ao trazer nosso modelo de pagamento por consulta para sua rede, garantimos que milhões de proprietários de conteúdo possam optar por serem compensados toda vez que seu conteúdo aparecer em nossos resultados de busca.”

Além da compensação, os proprietários de conteúdo que participam do programa Cloudflare/Ceramic desbloquearão novos relatórios para ajudar na otimização do motor de resposta (AEO). Os clientes podem