Perplexity deseja mudar a forma como utilizamos a internet, mas a startup de busca de IA apoiada por Jeff Bezos pode estar quebrando suas regras para fazer isso. A empresa parece estar ignorando um padrão amplamente aceito na web, o Protocolo de Exclusão de Robôs, para coletar partes da web que os operadores não querem que sejam acessadas por bots, de acordo com um relatório do desenvolvedor Robb Knight esta semana, confirmado pela Wired.
O serviço da Perplexity resume artigos na web, afirmando entregar “respostas confiáveis” sem a necessidade de clicar em diferentes links. Para fazer isso, a Wired e Knight descobriram que a Perplexity ignora intencionalmente o código (arquivos robots.txt) destinado a bloquear os rastreadores da web. Os dois relatórios descobriram que a Perplexity usa um endereço IP não listado para contornar esses arquivos robots.txt e coletar informações dos sites de qualquer maneira. A Wired afirma que seu site bloqueou o rastreador da web da Perplexity no início de 2024, mas o mecanismo de busca de IA ainda é capaz de resumir seus artigos em detalhes.
Apesar disso, a Perplexity afirma respeitar o Protocolo de Exclusão de Robôs na documentação em seu site. O CEO da Perplexity, Aravind Srinivas, disse à Wired que os repórteres tiveram “uma incompreensão profunda e fundamental de como a Perplexity e a Internet funcionam”, mas não contestou diretamente as descobertas. O Gizmodo entrou em contato com a Perplexity para obter uma resposta mais detalhada e atualizará o artigo se receber uma resposta.
Separadamente, a Perplexity está enfrentando ameaças legais por violação de direitos autorais. A Forbes supostamente ameaçou entrar com ação legal contra a Perplexity esta semana, após acusar a startup de IA de usar conteúdo da Forbes sem atribuição adequada. A Forbes havia feito reportagens originais sobre o empreendimento de drones de IA do ex-CEO do Google, Eric Schmidt, e a Perplexity criou artigos, podcasts e vídeos gerados por IA usando texto e imagens da Forbes. O editor executivo da Forbes denunciou a Perplexity anteriormente neste mês.
O produto da Perplexity, embora útil, desvia o tráfego na internet. O Google também indexa páginas da web e oferece resumos de IA, mas direciona o tráfego diretamente para as páginas da web de onde a informação vem. A Perplexity efetivamente está escrevendo artigos detalhados de IA, fazendo com que os usuários não cliquem nos sites, o que vai contra o modelo de negócios da mídia digital.
A OpenAI fez parcerias com empresas de mídia para lidar com isso, pagando antecipadamente para licenciar conteúdo, e a Perplexity estaria trabalhando em parcerias semelhantes, mas em vez de pagar uma taxa fixa pelo conteúdo como a OpenAI, a Perplexity pretendia compartilhar receitas. Mas essas parcerias ainda não existem, então, por enquanto, a Perplexity parece estar contornando os muros de pagamento e coletando informações dos sites para alimentar suas respostas de IA.
