简要分析
- Anthropic以每百万输入token 0.10美元、每百万输出token 0.50美元的价格发布Claude Haiku 5.5(适用于10万token以内的提示),而Haiku 4.5的价格为1美元和5美元。
- Haiku 5.5在OSWorld 2.1离线子集上得分72.4%,在Terminal-Bench 4.0上得分39.2%,均优于OpenAI的GPT-6 Luna,但远低于Sonnet 5.5在编程测试中的70.6%。
- Anthropic还将Sonnet 5.5的缓存读取价格减半至每百万token 0.10美元,并将于本周为Max和Team订阅用户增加每月API积分。
Anthropic于周三发布了Claude Haiku 5.5,称其为目前最便宜、最快且能力最强的小型模型。该模型主要针对高流量任务,如文档摘要和数据库查询,以及对速度敏感的工作,如实时客户支持和为用户操作网页浏览器。
将Claude集成到自身产品中的开发者,对于10万token以内的提示,需支付每百万输入token 0.10美元、每百万输出token 0.50美元。Token是AI模型读取和写入的文本小块(约为四分之三个单词),也是大型AI公司的计费单位。这一费率与OpenAI在9月22日推出其竞争对手小型模型GPT-6 Luna时设定的费率相符。
Haiku 4.5的费用为1美元和5美元,新费率降低了90%,而超过10万token的提示费用则减半。由于约90%针对旧模型的请求低于该限额,且Haiku 5.5将文本分割成略多的token,Anthropic指出平均节省幅度接近75%。
客户支持聊天和长邮件摘要正是Anthropic为Haiku构建的任务场景。因此,本质上重复性高、简单且非创造性的任务是该模型的最佳适用领域。
话虽如此,基准测试表明这并非一款愚笨的模型。例如,在OSWorld 2.1测试中(该测试评估AI能否通过长步数、多步骤任务操作真实计算机,并按部分得分百分比计算),Haiku 5.5以72.4%的成功率击败了OpenAI的GPT Luna(48.9%)。
Terminal-Bench 4.0让AI代理通过自行输入命令来完成专业任务,并评分首次尝试即正确完成的比例。Haiku 5.5得分为39.2%,OpenAI的Luna为16.4%,而Haiku 4.5为0%。
作为对比,Anthropic的Claude Sonnet 5.5得分70.6%。
我们在一个简单的逻辑问题上测试了该模型,响应速度极快,几乎是瞬间完成的。然而,它给出了错误答案,这不是用户希望从模型中得到的结果,因此需谨慎对待,不可盲目信任。
在GDPval-AA v2.1上(该评测基于Elo等级体系,即从国际象棋借鉴的头部对决排名系统,对模型在44种职业中的真实专业工作表现进行评级),Haiku 5.5得分1620。Luna得分为1437,Haiku 4.5得分为735。
这也是首款具备可调努力设置的Haiku模型,该设置允许用户通过调节“旋钮”在成本与更智能的答案之间进行权衡。Anthropic还将Sonnet 5.5的缓存读取价格减半至每百万token 0.10美元,这是针对模型已处理文本的优惠费率。
Haiku 5.5于9月22日发布的Opus 5.5之后15天,以及9月28日发布的Sonnet 5.5之后9天推出,是Anthropic此前承诺的三款Claude 5.5模型中的最后一款。Opus 5.5是自CEO Dario Amodei发表文章呼吁行业放缓AI能力提升以来发布的首款模型。
Haiku 5.5现已在Claude网站、Amazon Web Services、Google Cloud和Microsoft Azure上开放使用,模型名称为claude-haiku-5-5。Anthropic还将于本周推出每月API积分:Max 5x计划订阅用户为100美元,Max 20x计划为200美元,Team计划最多为500美元(用户共享)。