Tabbit
活动资源博客模型
Tabbit LogoTabbit

Tabbit — 为你工作的 AI 浏览器

主题资源

  • AI Browser Resources
  • Agentic Browser Resources
  • Browser Downloads and Install Guides
  • Browser Comparisons
  • AI Browser Alternatives
  • Browser Productivity Resources

热门指南

  • AI Browser
  • Agentic Browser Download
  • Best AI Browser 2026: Top 9 Tested & Ranked
  • AI Browser Download
  • Free AI Browser
  • Best AI Browser 2026
  • AI Browser Comparison 2026
  • AI Browser for Windows
  • AI Browser for Mac
  • Chrome Alternative 2026

活动

  • 别装了,你在《牛来》里早有原型
  • Tabbit 妙招大赛
  • KPOP SBTI 饭圈人格测试
  • Tabbit 校园共创者计划
  • fifi 的论文文献妙招精选
  • 用户问卷

关于

  • Tabbit 博客
  • 媒体报道
简体中文
简体中文English
测评与证据

Claude Opus 4.7 · 媒体来源 · 独立测量

Claude Opus 4.7:Vellum 跨模型基准与任务选型

Vellum 对官方数据的整理显示 Opus 4.7 的优势集中在 SWE-bench Pro、MCP-Atlas、Finance Agent 和视觉推理,而 BrowseComp 是相对回归点,适合按工作流而非总榜选型。

待验证:本次未能重新核实原文。下方历史数字不代表已核实的当前结果。

媒体来源独立测量编辑日期 2026-09-20

测试条件速查

模型/版本
Claude-Opus-4.7;来源日期:2026-04-16。
harness/任务
数据来源:Vellum 根据 Anthropic 官方 system card 和合作方资料整理基准表,并解释各 benchmark 任务含义。;比较模型:Opus 4.7/4.6、Claude Mythos Preview、GPT-5.4/5.4 Pro、Gemini 3.1 Pro。
样本/缺口
局限记录:官方合作方数字(CursorBench、93-task coding、visual acuity 等)缺少完整任务和原始输出,不能与公开数据等权。;选型结论依赖具体工具、上下文、effort 和 token 预算;文章没有提供统一的 API 参数表。

关键数据与适用场景

一句话结论

Vellum 对官方数据的整理显示 Opus 4.7 的优势集中在 SWE-bench Pro、MCP-Atlas、Finance Agent 和视觉推理,而 BrowseComp 是相对回归点,适合按工作流而非总榜选型。

适用场景

  • 适合的任务:真实仓库修复、多工具编排、财务分析、桌面操作和复杂图表理解。

  • 不适合的任务:主要做多页面网页检索/综合,或 token 预算严格且尚未重新测量 4.7 tokenizer 的应用。

  • 适用的模型版本:Claude Opus 4.7。

  • 适用的客户端、Agent 或 API:Vellum 分析与 Anthropic API/平台;文章不是某一客户生产流量的控制实验。

  • 推荐的推理档位和参数:按 Anthropic 建议从 high/xhigh 开始;文章本身没有独立公开统一 effort 配置。

测试环境、输入/配置

  • 数据来源:Vellum 根据 Anthropic 官方 system card 和合作方资料整理基准表,并解释各 benchmark 任务含义。

  • 比较模型:Opus 4.7/4.6、Claude Mythos Preview、GPT-5.4/5.4 Pro、Gemini 3.1 Pro。

  • 原始输入与 harness:Vellum 没有公开重新运行这些 benchmark 的完整输入、代码或运行配置;属于数据解读与任务选型分析。

结果数据

基准Opus 4.7Opus 4.6关键对照
SWE-bench Verified87.6%80.8%Gemini 3.1 Pro 80.6%
SWE-bench Pro64.3%53.4%GPT-5.4 57.7%;Gemini 3.1 Pro 54.2%
Terminal-Bench 2.069.4%65.4%GPT-5.4 75.1%;Gemini 3.1 Pro 68.5%
MCP-Atlas77.3%75.8%GPT-5.4 68.1%;Gemini 3.1 Pro 73.9%
Finance Agent v1.164.4%60.1%GPT-5.4 Pro 61.5%;Gemini 3.1 Pro 59.7%
OSWorld-Verified78.0%72.7%GPT-5.4 75.0%
BrowseComp79.3%83.7%GPT-5.4 Pro 89.3%;Gemini 3.1 Pro 85.9%
GPQA Diamond94.2%91.3%Gemini 3.1 Pro 94.3%
CharXiv 无工具/有工具82.1% / 91.0%69.1% / 84.7%Mythos Preview 86.1% / 93.2%

Vellum 还记录官方迁移提示:4.7 的 tokenizer 可能让同样文本变成约 1.0–1.35× token;高 effort 的长 Agent turn 也可能增加输出 token。

结论

如果工作流的瓶颈是复杂代码、工具调用、屏幕理解或专业分析,Opus 4.7 的提升值得进行 A/B 迁移;如果瓶颈是深度网页搜索,79.3% 的 BrowseComp 低于 4.6 的 83.7%,应考虑保留 4.6 或比较其他模型。

局限

  • 文章主要是官方结果的二次解释,不是 Vellum 自己按同一 harness 复跑的独立 benchmark。

  • 官方合作方数字(CursorBench、93-task coding、visual acuity 等)缺少完整任务和原始输出,不能与公开数据等权。

  • 选型结论依赖具体工具、上下文、effort 和 token 预算;文章没有提供统一的 API 参数表。

复现步骤

  1. 从文章列出的四类任务各选业务样本:仓库 issue、多工具流程、视觉图表、网页研究。

  2. 固定相同 prompt、工具 schema、权限、effort 和上下文上限,分别运行 Opus 4.6 与 4.7。

  3. 记录任务成功、测试通过、工具错误、token、延迟、事实错误和人工修订量。

  4. 单独查看 BrowseComp 类研究任务,避免编码高分把网页研究回归平均掉。

  5. 用真实流量估算 tokenizer 变化后的每任务成本,再决定升级或分流。

原始证据与数据

Vellum 原文逐项解释 SWE-bench Pro、MCP-Atlas、OSWorld、BrowseComp、GPQA、HLE 和 CharXiv,并明确指出 BrowseComp 从 83.7% 降至 79.3%;其余表格数据来自 Anthropic system card 的报告。

来源摘录或观察(仅做合规短引)

Vellum 的总判断是 “a focused, high-performance upgrade”,而不是全面横扫;这个判断与表中编码/工具提升、BrowseComp 回落的分化相符。

能支持的判断

  • 如果工作流的瓶颈是复杂代码、工具调用、屏幕理解或专业分析,Opus 4.7 的提升值得进行 A/B 迁移;如果瓶颈是深度网页搜索,79.3% 的 BrowseComp 低于 4.6 的 83.7%,应考虑保留 4.6 或比较其他模型。

不能支持的判断

  • 官方合作方数字(CursorBench、93-task coding、visual acuity 等)缺少完整任务和原始输出,不能与公开数据等权。
  • 选型结论依赖具体工具、上下文、effort 和 token 预算;文章没有提供统一的 API 参数表。

方法、局限和复现

本文中的数字、任务集、推理档位和客户端条件只在所列来源及采集时点内成立。不同版本、不同 harness 或不同提供商的数据不能直接并排比较;未公开的参数保持未知。

需要复测时,请固定模型版本、提供商或客户端、推理档位、工具、任务集版本、样本数和采集日期,并记录失败、重试与人工修正。完整方法和复现步骤见下方来源笔记。

原始来源

Vellum · Nicolas Zeeb · 原文发布日期 2026-04-16 · 本站编辑日期 2026-09-20

打开原始来源

Claude Opus 4.7

在 Tabbit 中比较 Claude Opus 4.7

下载 Tabbit 客户端后检查模型可用性

模型深度阅读

总览 · 简体中文

Claude Opus 4.7:改了什么、适合什么,以及何时迁移

用来源核对 Claude Opus 4.7 的 4.6 升级、基准分化、API 获取、成本、生命周期与迁移检查。

相关评测

Claude Opus 4.7:官方编码、视觉与 Agent 基准官方发布把 Opus 4.7 定位为面向困难软件工程、长程 Agent 和高分辨率视觉的 4.6 升级,但 BrowseComp 回落和更高 token 消耗说明它不是所有任务的无条件替代品。Claude Opus 4.7:Reddit ClaudeCode 发布后长会话体验社区反馈显示 Opus 4.7 的长会话质量和上下文记忆体感波动很大,既有人报告 debug/网站任务明显提速,也有人遇到过度复杂、遗忘、幻觉与 token/配额压力,因此必须在自己的 Claude Code 会话上验证。Claude Opus 4.7:努力档位与迁移提示模板按“Claude Opus 4.7:努力档位与迁移提示模板”的任务特定指南执行;前置条件、步骤、验收、修正和来源边界均已写明。Claude Opus 4.7:Anthropic 官方提示词库与最佳模式按“Claude Opus 4.7:Anthropic 官方提示词库与最佳模式”的任务特定指南执行;前置条件、步骤、验收、修正和来源边界均已写明。Claude Opus 4.7:官方 Claude Code 定制指南 - CLAUDE.md、Skills、Hooks 与 Subagents 的选择按“Claude Opus 4.7:官方 Claude Code 定制指南 - CLAUDE.md、Skills、Hooks 与 Subagents 的选择”的任务特定指南执行;前置条件、步骤、验收、修正和来源边界均已写明。Claude Opus 4.7:Claude Code Cookbook 命令、角色与自动化配置按“Claude Opus 4.7:Claude Code Cookbook 命令、角色与自动化配置”的任务特定指南执行;前置条件、步骤、验收、修正和来源边界均已写明。