Você deve comprar o ChatGPT Plus ou o Claude Pro?

No mundo dos chatbots de IA, as versões pagas do ChatGPT e Claude lideram em termos de desempenho. Colocamos ambos à prova para determinar qual deles, ChatGPT Plus ou Claude Pro, oferece o melhor desempenho e valor pelo seu dinheiro com seu modelo de linguagem.

Conheça ChatGPT Plus e Claude Pro

A febre dos chatbots de IA foi inegavelmente desencadeada pelo lançamento da versão gratuita do ChatGPT em 30 de novembro de 2022. Desenvolvido pela OpenAI, o ChatGPT ganhou mais de 100 milhões de usuários em apenas alguns meses e contribuiu para a avaliação atual da OpenAI de mais de US$ 80 bilhões.

A OpenAI é apoiada por um investimento significativo da Microsoft (que oferece seu próprio assistente Copilot AI), e a empresa tem um relacionamento tumultuado com seu cofundador Elon Musk, que deixou a empresa em 2018 devido a divergências sobre sua direção.

A versão premium do ChatGPT, chamada ChatGPT Plus, foi lançada em fevereiro de 2023, oferecendo os modelos mais recentes, acesso prioritário durante períodos de pico e diversas outras vantagens.

A Anthropic, uma startup de IA com sede nos EUA, lançou seu próprio chatbot de IA, Claude , em março de 2023. De acordo com a declaração de missão da empresa, a Anthropic se dedica a pesquisar e desenvolver tecnologias de IA seguras e confiáveis, com base em uma abordagem única. Chamada de “IA Constitucional”, visa tornar os sistemas de IA úteis, honestos e inofensivos.

Embora a Anthropic possa não ser tão conhecida quanto a OpenAI, a empresa já causou um impacto significativo na comunidade de IA, com seu modelo mais capaz, o Opus. Este modelo está incluído no Claude Pro da Anthropic, um plano de assinatura mensal introduzido em setembro de 2023 nos EUA e no Reino Unido, e agora disponível também na UE.

Recursos do ChatGPT Plus e Claude Pro

O ChatGPT Plus custa US$ 20 por mês e inclui o seguinte:

• Acesso ao modelo GPT-4 e até cinco vezes mais capacidade de mensagens para GPT-4o.
• Geração de imagens com DALL-E com base em descrições de texto.
• Acesso antecipado a novos recursos. Por exemplo, apenas assinantes do ChatGPT Plus podem usar o aplicativo ChatGPT para macOS no momento em que esta comparação foi escrita.
• Tempos de espera mínimos, mesmo durante períodos de alta demanda.
• A capacidade de analisar conjuntos de dados e incorporar conteúdo diretamente nas conversas.
• A criação de GPTs personalizados, adaptados especificamente às necessidades individuais ou organizacionais.

O Claude Pro também custa US$ 20 por mês, mas a lista de recursos incluídos na assinatura é menor:

• Claude Pro inclui o modelo mais poderoso, Opus.
• Os usuários podem esperar um desempenho consistente, mesmo quando a demanda aumenta e fazem mais perguntas a Claude (pelo menos cinco vezes mais).
• Os assinantes têm acesso prioritário a novos recursos.

É claro que a assinatura do ChatGPT Plus oferece um conjunto mais abrangente de recursos em comparação com o Claude Pro. Embora ambos os chatbots de IA possam compreender e analisar imagens, apenas o ChatGPT Plus pode gerar imagens a partir de prompts de texto usando DALL-E. Além disso, a capacidade de criar GPTs personalizados de acordo com necessidades específicas é uma vantagem significativa para os usuários do ChatGPT Plus, pois permite maior flexibilidade e personalização.

Também vale a pena mencionar que os usuários do Claude Pro não têm acesso a nenhum recurso de chat de voz – algo que até mesmo os usuários gratuitos do ChatGPT podem desfrutar. Se você gostaria de vivenciar o filme Her na vida real, então ChatGPT é a escolha óbvia.

No entanto, o valor de uma assinatura depende não apenas dos recursos oferecidos, mas também de quão bem esses recursos funcionam na prática. Vamos colocá-los à prova.

Comparação de desempenho ChatGPT Plus vs.

Como os recursos do ChatGPT Plus e do Claude Pro são diferentes, com o Claude Pro sem geração de imagens e recursos de bate-papo por voz, nos concentraremos em testar seu desempenho de geração de texto atribuindo a ambos os chatbots (os modelos GPT-4 e Opus, para ser exato) o seguintes três tarefas:

Tarefa de escrita

Para avaliar suas capacidades de escrita, pedi a ambos os chatbots de IA que escrevessem um artigo de 500 palavras sobre o tópico “O futuro da inteligência artificial na saúde”. Avaliei os artigos gerados com base em sua coerência, relevância para o tópico e qualidade geral.

Aqui está a solicitação exata que usei : Escreva um artigo de 500 palavras sobre o tema “O futuro da inteligência artificial na saúde”. Inclua várias referências para apoiar suas reivindicações. Use um estilo de escrita envolvente, mas evite bobagens.

Na tarefa de redação, tanto o ChatGPT Plus quanto o Claude Pro tiveram um desempenho impressionante, gerando cerca de 500 palavras e incluindo múltiplas referências conforme as instruções. No entanto, Claude Pro deu um passo além ao fornecer uma lista formatada de referências no final, completa com autores, títulos de fontes, anos de publicação e até páginas específicas.

Curiosamente, o ChatGPT Plus escolheu estruturar o texto usando subtítulos, o que é uma prática comum para artigos da Web. Isso pode tornar o conteúdo mais fácil de ler e amigável ao usuário. No entanto, o texto de Claude Pro tinha uma sensação mais parecida com um ensaio, sem nenhuma seção ou subtítulo distintos.

Quando se trata do conteúdo em si, ambos os chatbots de IA forneceram informações semelhantes, cobrindo vários exemplos e abordando preocupações éticas relacionadas à IA na área da saúde. No entanto, eu pessoalmente achei o estilo de escrita de Claude Pro mais envolvente e fluido.

Vencedor : Cláudio

Tarefa de análise de dados

Forneci aos dois chatbots de IA dados climáticos da cidade de Nova York coletados em 2016 e no formato .csv. Pedi que eles encontrassem o dia mais quente do ano.

Aqui está o prompt exato que usei : Estou fornecendo a você um conjunto de dados contendo dados climáticos de Nova York para o ano de 2016. Encontre o dia mais quente do ano.

Tanto o ChatGPT Plus quanto o Claude Pro foram capazes de processar e analisar os dados meteorológicos da cidade de Nova York de 2016.

O ChatGPT Plus identificou 23 de julho como o dia mais quente, com uma temperatura máxima de 96°F e uma temperatura mínima de 80°F, com média de 88°F. Embora esse dia tenha realmente registrado uma temperatura máxima alta, não foi o único.

Claude Pro forneceu uma resposta melhor ao reconhecer que a temperatura máxima mais alta de 96°F foi registrada em dois dias: 23 de julho e 13 de agosto. Ele também forneceu detalhamentos de temperatura para ambos os dias, observando uma temperatura média de 88°F em 23 de julho. e um pouco mais alto de 88,5°F em 13 de agosto.

Vencedor : Cláudio

Tarefa de codificação

Para testar os recursos de codificação, copiei e colei o código Python com erros deliberados e pedi ao chatbot para localizá-los e corrigi-los, explicando quais eram os problemas.

Aqui está o prompt exato que usei : Por favor, revise o seguinte trecho de código Python e identifique quaisquer erros ou problemas. Para cada problema que encontrar, forneça uma explicação do problema e sugira uma solução. Após abordar todos os problemas, apresente a versão corrigida do código.

Os resultados foram consistentes em outros trechos de código e linguagens de programação populares, como JavaScript, PHP, SQL e Java.

Esse alto nível de proficiência em codificação provavelmente se deve à ampla representação dessas linguagens nos dados de treinamento para ambos os modelos. Como resultado, os usuários podem confiar com confiança no ChatGPT Plus e no Claude Pro para tarefas relacionadas à codificação, como depuração, explicação de código e geração de programas simples.

Vencedor : Empate

Veredicto: ChatGPT Plus vs. Claude Pro

Embora o ChatGPT Plus seja um chatbot premium com mais recursos, o Claude Pro teve um desempenho melhor na maioria dos nossos testes reais, revelando-se um escritor mais natural e um melhor analista de dados.

Isso torna bastante difícil escolher um vencedor. Se você optar pelo ChatGPT Plus, terá mais recursos, mas poderá acabar enviando mais solicitações para obter a resposta desejada. Por outro lado, Claude e seu melhor modelo, Opus, parecem ser o LLM mais inteligente do momento, mas não consegue gerar imagens nem interagir com chat de voz.

Se você tiver orçamento, recomendo fazer as duas assinaturas. Dessa forma, você pode comparar suas respostas e aproveitar melhor seus pontos fortes. No entanto, se você puder pagar apenas uma assinatura, recomendo ChatGPT Plus para uso mais geral e Claude Pro para escrita e análise de dados.

É claro que ChatGPT e Claude não são os únicos chatbots de IA disponíveis. Recentemente, comparei as versões premium de três chatbots de IA diferentes com seus equivalentes gratuitos para ver se as atualizações valem o custo. Recomendo a leitura do comparativo caso você ainda não encontrou o assistente ideal para suas necessidades.

Crédito da imagem: DALL-E. Capturas de tela por David Morelo.