ChatGPT, da OpenAI, superou o Claude Haiku 5.5, da Anthropic, por 3 a 2 em um teste com cinco tarefas típicas do dia a dia. Ainda assim, o modelo da Anthropic venceu justamente nas duas provas em que o peso maior estava em conselhos personalizados.
Principais destaques:
- ChatGPT venceu nas tarefas de planejamento do Dia de Ação de Graças, escrita criativa e criação de calculadora de orçamento.
- Claude Haiku 5.5 levou vantagem nas provas de escolha de tênis de corrida e de organização da agenda familiar, com respostas mais personalizadas.
- O Haiku 5.5 substitui o Haiku 4.5 no menu de modelos para utilizadores Free, Pro e Max a partir de 29 de outubro.
Resultados do teste com o ChatGPT
A jornalista de tecnologia Amanda Caswell, especializada em IA, comparou os dois chatbots usando os mesmos prompts, em um artigo publicado em 15 de outubro.
As tarefas iam de planejar um jantar de fim de ano à montagem de uma planilha de orçamento doméstico. Caswell avaliou as respostas pelo grau de obediência às instruções originais e pela quantidade de trabalho que ainda restava para ela fazer depois.
No desafio de Dia de Ação de Graças, o ChatGPT saiu na frente ao propor quase todos os acompanhamentos em versão vegana para um jantar de 10 pessoas, preparado em um único forno e com orçamento de US$ 175. O modelo também começou uma história de dragão em plena perseguição, com um tom mais adequado ao público infantojuvenil, além de montar uma ferramenta de orçamento que o utilizador podia editar, descarregar e executar offline.
O Claude, por sua vez, venceu a rodada dos tênis de corrida ao orientar uma corredora de pisada com arco alto, que corre cerca de 35 milhas por semana, para modelos neutros, com máxima absorção de impacto. O ChatGPT sugeriu um tênis mais firme, que Caswell considerou menos adequado. O Claude também se saiu melhor no teste de agenda familiar, oferecendo um plano mais personalizado para um pai ou mãe que trabalha, com três filhos, tentando encaixar treino de futebol, ida aos correios e um prazo de entrega no trabalho.
Veja também: Como o iPhone Duo da Apple passou da pré-venda ao esgotado em 30 minutos
Veredito sobre o Claude Haiku 5.5
Caswell classificou o Haiku 5.5 como um bom modelo para questões do dia a dia, mas afirmou que, para esse conjunto específico de tarefas, provavelmente continuaria a escolher primeiro o ChatGPT. Nos dois pontos em que Claude venceu, ela atribuiu a vantagem a conselhos que pareciam mais alinhados à sua realidade.
A Anthropic lançou o Haiku 5.5 em 7 de outubro como o menor e mais barato modelo da família Claude. Segundo a empresa, o novo modelo custa cerca de 75% menos para operar do que o Haiku 4.5 e é indicado para tarefas rápidas e repetitivas, como resumos e atendimento ao cliente em tempo real. Os clientes pagam US$ 0,10 por milhão de tokens de entrada, em linha com o GPT-6 Luna, o menor modelo da OpenAI.
Lançamentos do GPT-6 e do Haiku
A Anthropic está retirando o Haiku 4.5 do seletor de modelos para utilizadores Free, Pro e Max a partir de 29 de outubro, deixando o Haiku 5.5 como substituto direto. Conversas antigas permanecerão acessíveis.
A OpenAI disponibilizou o GPT-6 no ChatGPT em 7 de outubro, no mesmo dia da chegada do Haiku 5.5, acompanhado de uma nova interface capaz de inserir gráficos interativos, calculadoras e botões diretamente nas respostas. O gestor de produto Aarush Selvan afirmou que as respostas mais úteis “não são apenas texto”. O lançamento do Haiku, por sua vez, coroou um mês em que a Anthropic também atualizou os modelos Opus e Sonnet para a versão 5.5.
Próximo texto: O USDC pode conquistar o mundo em desenvolvimento? A Circle está prestes a descobrir
