Bolt42

Na semana passada, a OpenAI lançou seu aguardado produto de busca, o ChatGPT Search, para competir com o Google. A indústria se preparou para esse momento por meses, levando o Google a adicionar respostas geradas por IA em seu produto principal mais cedo neste ano, o que resultou em algumas alucinações embaraçosas nesse processo. Esse erro fez com que muitas pessoas acreditassem que o motor de busca da OpenAI seria realmente um “destruidor do Google”.

Mas após usar o ChatGPT Search como meu motor de busca padrão (você também pode, com a extensão da OpenAI) por cerca de um dia, rapidamente mudei de volta para o Google. O produto de busca da OpenAI foi impressionante em alguns aspectos e ofereceu um vislumbre de como uma interface de busca com IA poderia um dia parecer. Mas, por enquanto, ainda é muito imprático de usar como meu motor de busca diário.

O ChatGPT Search foi ocasionalmente útil para encontrar respostas em tempo real para perguntas que eu teria que procurar em muitos anúncios e artigos otimizados para SEO para encontrar. Como outros na categoria de busca com IA, como Perplexity e You.com, ele apresenta respostas concisas em um formato agradável: você obtém links para as fontes das informações no lado direito; os títulos e pequenos trechos oferecem uma rápida verificação da realidade do texto gerado pela IA.

Aqui está a resposta da OpenAI à busca do Google.Créditos da Imagem:Maxwell Zeff/OpenAI

No entanto, muitas vezes me pareceu impraticável para o uso diário.

Na sua forma atual, o ChatGPT Search é pouco confiável para o que as pessoas mais usam o Google: consultas curtas e de navegação. Consultas com menos de quatro palavras representam a maior parte das buscas no Google; essas são frequentemente apenas algumas palavras-chave que levam você ao site certo, geralmente um que o usuário já conhece, mas não quer se incomodar digitando. São o tipo de buscas que a maioria das pessoas mal percebe que está fazendo o dia todo, e é isso que o Google tende a fazer muito bem.

Estou falando de “placar dos Celtics”, “meias de algodão”, “horários da biblioteca”, “clima de São Francisco”, “cafés perto de mim” e outras consultas que fazem do Google a porta de entrada para a internet para bilhões de pessoas.

Minha experiência de testes com o ChatGPT Search foi bastante frustrante em certos momentos, e me fez perceber quantas buscas por palavras-chave eu realizo em um dia. Eu não consegui encontrar informações de forma confiável usando consultas curtas e, pela primeira vez em anos, realmente anseiei pelo Google Search.

Não me entenda mal: o Google tem declinado em qualidade na última década, em grande parte porque foi inundado com anúncios, SEO e resumos de IA questionáveis. Ainda assim, continuei abrindo o Google em uma janela separada durante meu teste porque o ChatGPT Search não conseguia me dar uma resposta correta ou uma página da web.

Quem venceria: ChatGPT Search ou consultas curtas?

Digitei “placar dos Nuggets” para verificar como estava um jogo ao vivo da NBA entre o Denver Nuggets e o Minnesota Timberwolves. O ChatGPT me disse que os Nuggets estavam ganhando, embora na verdade estivessem perdendo, e mostrou um placar dos Timberwolves que estava 10 pontos abaixo do que realmente era, de acordo com um resultado do Google no mesmo momento.

Comparação entre ChatGPT Search (esquerda) e busca do Google (direita) para placares da NBA ao vivo.Créditos da Imagem:Maxwell Zeff/OpenAI

Outra vez, tentei “ganhos hoje”, para verificar as empresas que reportariam resultados trimestrais que poderiam afetar os preços das ações na sexta-feira. O ChatGPT me disse que a Apple e a Amazon estavam reportando seus resultados na sexta-feira, mesmo que ambas as empresas já tivessem divulgado um dia antes. Em outras palavras, ele alucinou e inventou informações. 

Em outro teste, digitei o nome de um executivo de tecnologia para encontrar suas informações de contato. O ChatGPT me mostrou um resumo do perfil da pessoa no Facebook e alucinou um link para sua página no LinkedIn, que gerou uma mensagem de erro quando eu cliquei.

Outra vez, digitei “calças jeans largas”, esperando fazer compras. O ChatGPT Search descreveu o que eram calças jeans largas em primeiro lugar (uma definição que eu não precisava) e recomendou que eu fosse ao Amazon.com para encontrar um bom par.

ChatGPT Search para "calças jeans largas".
ChatGPT Search para “calças jeans largas.” Créditos da Imagem:Maxwell Zeff/OpenAI

Eu poderia continuar, mas você entendeu a ideia. Links quebrados, alucinações e respostas aleatórias definiram meu primeiro dia usando o ChatGPT Search.

Talvez um “destruidor do Google” um dia, mas não hoje

Este não foi um lançamento insignificante para a OpenAI. Sam Altman elogiou a funcionalidade por ser “realmente boa,” mesmo que ele seja conhecido por minimizar as capacidades de IA de sua startup. O motivo pelo qual desta vez é diferente pode ter a ver com o fato de que a busca é um dos maiores negócios da internet, e a versão da OpenAI pode representar uma verdadeira ameaça ao seu maior concorrente, o Google.

Para ser justo, a busca do Google é um produto de 25 anos e o ChatGPT Search é totalmente novo. Em um post de blog, a OpenAI afirma que planeja melhorar o recurso com base no feedback dos usuários nos próximos meses, e é mais do que provável que esta seja uma área significativa de investimento para a startup.

O ChatGPT Search funciona bem para perguntas mais longas. Créditos da Imagem:Maxwell Zeff/OpenAI

Para seu crédito, o ChatGPT Search é bastante bom em responder a perguntas de pesquisa longas. Algo como “Qual liga esportiva profissional americana tem mais diversidade?” não é uma pergunta que você poderia facilmente responder com o Google, mas o ChatGPT Search é bastante bom em pesquisar múltiplos sites e obter uma resposta decente em apenas alguns segundos. (O Perplexity também é bastante bom nessas perguntas, e seu produto de busca já está no mercado há mais de um ano.)

Comparado à versão tradicional do ChatGPT, que já tinha acesso à web, a funcionalidade de busca parece ser uma interface melhor para navegar na internet. Agora, há links mais claros para as fontes de onde o ChatGPT obtém suas informações — para notícias, o ChatGPT utilizará as empresas de mídia com as quais tem firmado todos aqueles acordos de licenciamento.

A busca do ChatGPT utiliza os parceiros de notícias da OpenAI. Créditos da Imagem:Maxwell Zeff/OpenAI

O problema é que a maioria das buscas no Google não são perguntas tão longas. Para realmente substituir o Google, a OpenAI precisa aprimorar essas buscas curtas e práticas que as pessoas já fazem durante o dia.

A OpenAI não tem pudor em admitir que o ChatGPT Search enfrenta dificuldades com consultas curtas.

“Com a busca do ChatGPT, observamos que os usuários tendem a começar a fazer perguntas de maneira mais natural do que costumavam fazer com outras ferramentas de busca,” disse o porta-voz da OpenAI, Niko Felix, em uma declaração enviada por e-mail ao TechCrunch. “Ao mesmo tempo — consultas de navegação na web — que tendem a ser curtas, são bastante comuns. Planejamos melhorar a experiência para esses tipos de consultas ao longo do tempo.”

Dito isso, essas consultas curtas por palavras-chave tornaram o Google indispensável, e até que a OpenAI acerte nelas, o Google ainda será a principal escolha para muitas pessoas.

Existem algumas razões pelas quais a OpenAI pode estar lutando com essas consultas curtas. A primeira é que o ChatGPT depende do Microsoft Bing, que é amplamente considerado um mecanismo inferior em comparação com o Google.

A segunda razão é que modelos de linguagem grande (LLMs) podem não ser adequados para esses prompts curtos. Os LLMs geralmente precisam de perguntas completamente elaboradas para produzir respostas efetivas, pois isso ajuda a criar um padrão estatístico forte para que eles completem: ele não sabe que as pessoas que pesquisam “meias de algodão” estão quase todas tentando comprá-las, em vez de aprender sobre a origem do tecido. Talvez haja uma necessidade de repromptar — passar consultas curtas por um LLM como uma pergunta mais longa — antes que o ChatGPT Search consiga realizar essas buscas bem.

Embora a OpenAI tenha lançado seu produto de busca apenas agora, a própria ferramenta de busca de IA do Perplexity já está servindo 100 milhões de consultas de busca por semana. O Perplexity também foi considerado um “destruidor do Google”, mas enfrenta os mesmos problemas com consultas curtas.

Aravind Srinivas, o CEO do Perplexity, discutiu como as pessoas usam seu produto de forma diferente em comparação com o Google Search durante o TechCrunch Disrupt. “O número médio de palavras em uma consulta no Google está entre duas e três,” disse ele no evento. “No Perplexity, é em torno de 10 a 11 palavras. Portanto, claramente, mais do uso no Perplexity é das pessoas que vêm e conseguem perguntar diretamente uma questão. Por outro lado, no Google, você digita algumas palavras-chave para acessar instantaneamente um determinado link.”

Acho que o fato de as pessoas não estarem usando esses produtos para navegação na web apresenta um problema maior do que a OpenAI ou o Perplexity estão admitindo. Isso significa que o ChatGPT Search e o Perplexity não estão substituindo a busca do Google para a tarefa que ele faz melhor: navegação na web.

Em vez disso, esses produtos de IA estão ocupando um novo nicho, trazendo à tona informações que ficam enterradas na busca tradicional. Não me entenda mal, isso é valioso por si só.

A OpenAI e o Perplexity afirmam que trabalharão para melhorar nessas consultas curtas. Até então, não acho que nenhum desses produtos possa substituir o Google completamente. Se a OpenAI quiser substituir a porta de entrada para a internet, precisa criar uma melhor.

    três × 5 =

    Bolt42