跳到主要内容
727财经
中文

Haiku 5.5独立评测43分:遥遥领先GPT-6 Luna,但最高档Token消耗超3倍

动察 Beating AI 快讯,第三方评测机构 Artificial Analysis 公布 Claude Haiku 5.5 的测试结果。新模型在综合智能指数中获得 43 分,比上一代的 17 分提高 26 分。它超过 GPT-6 Luna 的 38 分、GLM-5.3 Flash 的 42 分,接近 Kimi K3 的 44 分。该指数综合了编程、专业工作、科学推理等 10 项测试。

不过,高分也伴随着大量 token 消耗。在最高推理强度下,Haiku 5.5 每项评测任务平均输出约 16.2 万 tokens,是 GPT-6 Luna 的 3.2 倍。两者基础 API 单价相同,但 Haiku 5.5 的预估单任务成本约为 0.21 美元,Luna 仅为 0.07 美元。Haiku 5.5 从次高档调至最高档,综合得分只增加 2 分,输出量却增加约 80%。

降低推理强度后,差距明显缩小。Haiku 5.5 在 high 档获得 38 分,平均每项任务输出约 5.5 万 tokens,与最高档 GPT-6 Luna 的 38 分和 5 万 tokens 接近。开发者可以通过调整推理强度,减少不必要的 token 消耗。

Haiku 5.5 也并非全面领先。在 AutomationBench-AA 自动化任务评测中,它仅得 35%,落后于 Luna 的 53%。不过,测试期间模型存在过度拒绝执行任务的问题。Anthropic 正在修复,Artificial Analysis 计划重新测试。此外,目前公布的 Haiku 5.5 任务成本尚未计入长上下文加价,实际费用可能更高。

相关资讯

  1. 营收狂飙难掩成本压力,Anthropic IPO面临盈利考题

    Anthropic修订版招股书显示,第三季度营收169.56亿美元、同比增长1127%,但算力与基础设施支出升至98.63亿美元,经营业绩由盈转亏,净亏损扩大至232.91亿美元,另有约8954...

  2. 某巨鲸用现货与合约双重做多ZEC,亏损584万美元

  3. ChatGPT Classic官宣“退役”,2027年1月底正式停服

  4. SHIB“榜一大哥”再次转出494万美元SHIB,剩余持仓价值4.18亿美元

  5. Wintermute在Hyperliquid持有1.01亿美元空仓,浮盈335万美元