OpenAI's ChatGPT uzyskał przewagę 3:2 nad Anthropic Claude Haiku 5.5 w teście pięciu codziennych zadań. Jednocześnie Claude wygrał dwie rundy, w których kluczowe było dopasowanie porad do indywidualnych potrzeb użytkownika.
Kluczowe wnioski:
- ChatGPT zwyciężył w zadaniach: planowanie Święta Dziękczynienia, kreatywne pisanie oraz budżetowy kalkulator domowy.
- Claude Haiku 5.5 wygrał w kategoriach doboru butów do biegania i planowania rodzinnego grafiku, oferując bardziej osobiste rekomendacje.
- Haiku 5.5 zastępuje Haiku 4.5 w menu modeli dla użytkowników Free, Pro i Max od 29 października.
Jak wypadł test ChatGPT
Amanda Caswell, dziennikarka technologiczna zajmująca się AI, porównała oba chatboty, zadając im identyczne pytania. Analiza została opublikowana 15 października.
Zakres zadań obejmował m.in. przygotowanie świątecznego obiadu oraz stworzenie kalkulatora domowego budżetu. Caswell oceniała odpowiedzi pod kątem tego, jak ściśle trzymały się wytycznych oraz ile pracy pozostawiały jeszcze po stronie użytkownika.
W rundzie poświęconej Świętu Dziękczynienia ChatGPT wygrał, proponując niemal wszystkie przystawki w wersji wegańskiej na 10‑osobowy obiad, przygotowywany w jednym piekarniku przy budżecie 175 dol. Model lepiej poradził sobie również z otwarciem opowieści o smoku – od razu w środku pościgu – trafiając w ton literatury dla starszych dzieci. Następnie przygotował edytowalne narzędzie budżetowe, które można pobrać i uruchomić offline.
Claude triumfował w zadaniu doboru butów do biegania, kierując biegacza z wysokim podbiciem, pokonującego ok. 35 mil tygodniowo, w stronę neutralnych modeli z maksymalną amortyzacją. ChatGPT wskazał twardszy model, który autorka uznała za gorzej dopasowany. Claude wygrał także test planowania kalendarza, proponując bardziej „ludzką” organizację dnia dla pracującego rodzica trójki dzieci, który musi pogodzić trening piłkarski dziecka, wizytę na poczcie i pilny deadline w pracy.
Zobacz także: Jak duet iPhone'ów Apple przeszedł z przedsprzedaży do statusu „brak w magazynie” w 30 minut
Ocena Claude Haiku 5.5
Caswell uznała Haiku 5.5 za solidny model do codziennych pytań, ale zaznaczyła, że przy takim zestawie zadań jej pierwszym wyborem pozostałby ChatGPT. Zwycięstwa Claude w dwóch kategoriach przypisała bardziej dopasowanym, „osobistym” poradom, lepiej odzwierciedlającym jej sytuację.
Anthropic wprowadził Haiku 5.5 7 października jako najmniejszy i najtańszy wariant w rodzinie modeli Claude. Według spółki nowy model jest około 75% tańszy w utrzymaniu niż Haiku 4.5 i najlepiej sprawdza się w szybkich, powtarzalnych zadaniach, takich jak tworzenie podsumowań czy obsługa klienta na żywo. Klienci płacą 0,10 dol. za milion tokenów wejściowych, czyli na poziomie GPT-6 Luna, najmniejszego modelu OpenAI.
Wdrażanie GPT-6 i Haiku
Anthropic usuwa Haiku 4.5 z listy modeli dostępnych dla użytkowników Free, Pro i Max z dniem 29 października, pozostawiając w ofercie Haiku 5.5. Dotychczasowe czaty pozostaną jednak dostępne.
OpenAI udostępniło GPT-6 w ramach ChatGPT 7 października – tego samego dnia, gdy zadebiutował Haiku 5.5 – wraz z nowym interfejsem, który pozwala osadzać w odpowiedziach interaktywne wykresy, kalkulatory i przyciski. Menedżer produktu Aarush Selvan podkreślił, że najbardziej użyteczne odpowiedzi „nie są wyłącznie tekstem”. Premiera Haiku zamknęła miesiąc, w którym Anthropic zaktualizował również modele Opus i Sonnet do wersji 5.5.
Czytaj dalej: Czy USDC podbije rynki wschodzące? Circle wkracza w decydującą fazę
