Cloudflare acusa Perplexity de burlar regras da web

Após ser investigado pela Amazon, o buscador com IA Perplexity enfrenta uma nova denúncia. Nessa segunda-feira (04/08), a Cloudflare acusou a startup de empregar “rastreadores furtivos” para extrair dados de websites.

A empresa de segurança de rede afirma que a Perplexity ignora as instruções do arquivo robots.txt, que permite aos proprietários de sites proibir a raspagem de dados por bots.

Essa manobra viola um padrão em vigor há mais de 30 anos e seria uma tentativa de coletar dados para alimentar seu serviço de IA, mesmo contra a vontade dos criadores de conteúdo.

As alegações surgiram após a Cloudflare receber reclamações de clientes que haviam configurado seus sites para proibir a coleta de dados por rastreadores da Perplexity, tanto através do arquivo robots.txt quanto por firewalls. Apesar dessas barreiras, o conteúdo continuava a ser acessado.

Diante das queixas, pesquisadores iniciaram uma investigação e descobriram um padrão de comportamento. Quando os rastreadores encontravam um bloqueio, a Perplexity passava a utilizar um bot furtivo, não declarado, que empregava uma série de táticas para mascarar sua identidade e atividade.

Esse rastreador operava a partir de múltiplos endereços de IP, alternando entre eles para contornar as restrições. “Essa atividade foi observada em dezenas de milhares de domínios e milhões de solicitações por dia”, escrevem os pesquisadores.

Fonte: Tecnoblog