简介
- Anthropic 于 9 月 1 日发布 Claude Fable 5.1 和 Claude Mythos 5.1,在 Terminal-Bench-Science 0.1 基准测试中得分 52.6%(Fable 5 为 24.7%),在 Terminal-Bench 4.0 中得分 55.8%(Fable 5 为 42.0%)。
- 缓存读取成本降低 75%,典型工作负载成本约降低 25%,高度代理型工作负载成本最高可降低 45%,基础定价维持每百万令牌 10/50 美元不变。
- Fable 5.1 未包含在 Pro 计划或标准 Team 席位中,此类账户按使用积分计费;Max 及高级 Team 或 Enterprise 席位将其包含在内,最高可达每周限额的 50%。
Anthropic 于周二发布了 Claude Fable 5.1 和 Claude Mythos 5.1,这是自 6 月 9 日 Fable 5 发布以来 Mythos 类模型线的首次更新。
该公司宣称新 AI 模型是“最先进的编码和知识工作模型”,此次发布距上一轮周期已有三个月,期间经历了为期 18 天的出口管制 shutdown、夏季关于订阅访问权的定价争议,以及 7 月发布的 Claude Opus 5(其价格低于 Fable 5)。
据 Anthropic 称,Fable 5.1 和 Mythos 5.1 基于同一底层模型,仅安全过滤器不同。Fable 5.1 已向所有 Claude 账户用户开放。Mythos 5.1 仍仅限于通过 Anthropic 的网络安全验证项目和生命科学验证项目审核的专业人士使用,这两个项目取代了此前对 Mythos 5 实施准入限制的 Project Glasswing 路径。
基准测试实际测量内容
Anthropic 的主要数据来自 Terminal-Bench-Science 0.1,该基准测试考察 AI 代理在命令行环境中执行科学研究任务的能力,以通过率计分。
Fable 5.1 得分为 52.6%,超过 Fable 5 的 24.7% 和 Opus 5 的 29.0%,实现翻倍。
Terminal-Bench 4.0 测试通过终端进行的代理式编码能力——在多步命令行会话中编写、运行和调试代码,以正确完成任务的百分比计分。Fable 5.1 得分为 55.8%,高于 Fable 5 的 42.0% 和 Opus 5 的 52.3%。
Mythos 5.1 在较轻的网络安全过滤器下运行,同类测试得分为 60.9%;Anthropic 表示,分数差距源于其安全护栏拦截并重定向到 Opus 4.8 的任务。
在 Humanity's Last Exam(一项基于数十个学术领域专家级问题的多学科推理测试,以通过率计分)中,Fable 5.1 在无外部工具时得分为 60.9%,有外部工具时为 65.0%,均优于 Opus 5,显示出 Anthropic 在该模型上最强大的学术推理能力。
超越 Opus 5 之处,以及计价中的模糊地带
Opus 5 于 7 月发布,其每令牌成本仅为 Fable 5 的一半,且在大多数主要基准测试中得分超过 Fable 5,实质上使旗舰模型对大多数付费用户失去必要性。
Fable 5.1 扭转了这一局面:它在 Anthropic 发布的所有基准测试中均优于 Opus 5,包括 Opus 5 此前得分较高的项目。
但 Fable 5.1 的每令牌成本仍是 Opus 5 的两倍——输入为 10 美元、输出为 50 美元,而 Opus 5 为 5 美元和 25 美元。令牌是模型处理信息的基本单位(通常约为平均英文单词的三分之二),企业因重度工作流会迅速消耗订阅计划中的配额而付费使用。
Anthropic 对该模型的推广重点在于“推理努力层级”而非原始得分:公司表示,以低或中等推理努力运行 Fable 5.1 即可匹配或超越 Fable 5 的旧有结果,且成本更低,而将顶级努力层级留给其他模型无法解决的问题。
对于常规工作,随着努力调节档位降低,跳过 Opus 5 的理由逐渐减弱。
访问权限沿袭 Fable 5 发布数月后调整确定的分级规则。Pro 计划及标准 Team 或 Enterprise 席位中,Fable 5.1 完全从按 API 费率计费的按使用量计费积分中扣除,因其不包含在这些计划的每周限额内。Max 计划及高级 Team 或 Enterprise 席位中,其作为订阅标准部分包含,最高可达每周使用量的 50%。
Claude Fable 5.1 现已在 Claude API、Amazon Bedrock、Google Cloud 和 Microsoft Foundry 上可用,模型 ID 为 "claude-fable-5-1"。
来源:https://decrypt.co/377078/anthropic-claude-fable-5-1