A Shoal Research disse que bots respondem por cerca de 60% das requisições de conteúdo HTML na rede da Cloudflare, enquanto humanos respondem por 38,2%. De acordo com a ChainCatcher, o CEO da Cloudflare, Matthew Prince, havia previsto anteriormente que o tráfego de bots excederia o tráfego humano em 2027 e, depois, afirmou que o crescimento do tráfego de agentes já havia colocado os bots à frente do tráfego humano.

O relatório disse que as aplicações de IA mantêm os usuários dentro de interfaces de chat ao resumir o conteúdo em vez de enviá-los de volta aos sites originais. Ele acrescentou que rastreadores de IA buscam e revisitam páginas em uma taxa muito maior do que o Googlebot, com o ClaudeBot registrando em média cerca de 4.200 páginas buscadas por revisita ao longo do último ano. Uma pesquisa do Pew Research Center encontrou que os resumos de IA reduziram as taxas de cliques de 15% para 8%.

O relatório também disse que o modelo atual de usar robots.txt e conteúdo em troca de tráfego é difícil de sustentar. Ele descreveu ações judiciais e licenciamento privado como medidas temporárias e disse que os modelos de pagamento por solicitação se dividem entre mercados fechados com chaves e protocolos abertos usando HTTP 402 e stablecoins, como x402 e MPP. A maior parte dos sites, disse, ainda fornece acesso gratuitamente ou bloqueia rastreadores.