OpenAI 的 ChatGPT 在五個日常情景測試中,以 3 比 2 壓過 Anthropic 的 Claude Haiku 5.5,不過涉及度身訂做建議的兩個回合,則由 Claude 取勝。
重點摘要:
- ChatGPT 勝出感恩節晚餐規劃、創意寫作及預算計算工具三個回合。
- Claude Haiku 5.5 在跑鞋建議及家庭行程安排兩項,以更貼身回答取勝。
- Haiku 5.5 將於 10 月 29 日起,取代 Haiku 4.5,成為免費版、Pro 及 Max 用戶的預設小型模型。
ChatGPT 實測結果
長期報道人工智能的科技記者 Amanda Caswell,在 10 月 15 日刊登的比較文章中,以完全相同的指令同場測試兩款聊天機械人。
測試範圍由節日晚餐安排,以至家用預算計算工具。她主要從兩個維度評分:回覆有多忠實跟足指示,以及最終還要她再花多少功夫「執手尾」。
在感恩節晚餐規劃一環,ChatGPT 成功設計出幾乎全部配菜皆為純素、服務 10 人,只用一個焗爐、總預算 175 美元的餐單,表現較佳。創意寫作方面,它以中高小學生文風,直接由飛龍追逐場面切入故事中段,氣氛較到位。預算工具方面,ChatGPT 則建立了一個可供用戶自行編輯、下載並離線運行的試算表。
Claude 則在跑鞋選擇回合勝出。面對一名每周跑 35 英里、高足弓跑手,它建議選擇中性、極致避震的跑鞋款式;Caswell 認為,ChatGPT 推薦的較硬鞋款,對她來說不太合腳。家庭行程安排方面,Claude 為一名需兼顧三個子女、要處理足球訓練、郵局辦事及工作死線的在職家長,排出一套較具個人化、貼近日常壓力的時間表,亦因而勝出。
延伸閱讀:Apple 新 iPhone 雙機組合 30 分鐘由預售變缺貨的背後
Claude Haiku 5.5 評價
Caswell 認為,Haiku 5.5 對處理一般日常問題相當稱職,但若以今次這組任務來看,她首選仍然會是 ChatGPT。她把 Claude 兩場勝仗,歸因於其建議更貼合自己實際情況,主觀感覺更「識睇人眉頭眼額」。
Anthropic 已於 10 月 7 日推出 Haiku 5.5,定位為 Claude 系列中體積最細、成本最低的一級。官方稱,新模型營運成本較 Haiku 4.5 低約 75%,特別適合摘要整理、即時客戶支援等短平快、重複性高的工作。企業客戶收費為每 100 萬個輸入 token 0.10 美元,與 OpenAI 最細型號 GPT-6 Luna 大致看齊,反映小型模型價格戰持續升溫。
GPT-6 與 Haiku 上線時間表
Anthropic 計劃於 10 月 29 日起,從模型選單中移除 Haiku 4.5,免費、Pro 及 Max 用戶屆時只會見到 Haiku 5.5;現有對話則會保留,不會被刪除。
OpenAI 則在同一日(10 月 7 日)為 ChatGPT 推出 GPT-6,並同步更新介面,讓回答可以直接嵌入互動圖表、計算機及按鈕。產品經理 Aarush Selvan 指出,最有用的答案「不應只限於文字」。與此同時,Haiku 5.5 的登場,也為 Anthropic 一整個月的產品更新畫上句號——該公司早前已把 Opus 及 Sonnet 升級至 5.5 版。

