Tabbit
活动资源博客模型
Tabbit LogoTabbit

Tabbit — 为你工作的 AI 浏览器

主题资源

  • AI Browser Resources
  • Agentic Browser Resources
  • Browser Downloads and Install Guides
  • Browser Comparisons
  • AI Browser Alternatives
  • Browser Productivity Resources

热门指南

  • AI Browser
  • Agentic Browser Download
  • Best AI Browser 2026: Top 9 Tested & Ranked
  • AI Browser Download
  • Free AI Browser
  • Best AI Browser 2026
  • AI Browser Comparison 2026
  • AI Browser for Windows
  • AI Browser for Mac
  • Chrome Alternative 2026

活动

  • 别装了,你在《牛来》里早有原型
  • Tabbit 妙招大赛
  • KPOP SBTI 饭圈人格测试
  • Tabbit 校园共创者计划
  • fifi 的论文文献妙招精选
  • 用户问卷

关于

  • Tabbit 博客
  • 媒体报道
简体中文
简体中文English
测评与证据

Gemini 3.1 Pro · 官方来源 · 厂商自报

Gemini 3.1 Pro 官方发布:ARC-AGI-2 与产品定位基线

Google 发布页以 2026-02-19 的 Gemini 3.1 Pro preview 和 ARC-AGI-2 verified 77.1% 作为产品基线,但没有公开完整 ARC harness。

官方来源厂商自报编辑日期 2026-09-20

测试条件速查

来源具体观察
2026-02-19 Google 发布;模型为 Gemini 3.1 Pro preview,官方报告 ARC-AGI-2 verified 77.1%。
已公布条件
发布页没有公开 ARC prompt、样本划分、采样参数或工具轨迹;模型 API 名称以 gemini-3.1-pro-preview 为准。

关键数据与适用场景

一句话结论

Google 将 Gemini 3.1 Pro 定位为复杂问题、多模态推理和 agentic workflow 的核心模型,并报告 ARC-AGI-2 verified 77.1%,但发布页只给出有限基准上下文。

测试环境

  • 版本:Gemini 3.1 Pro,2026-02-19 以 preview 形式发布。

  • 入口:Gemini API/AI Studio、Gemini CLI、Google Antigravity、Android Studio、Vertex AI、Gemini Enterprise、Gemini app、NotebookLM。

  • 基准:ARC-AGI-2,官方描述为测试模型解决全新逻辑模式的能力。

  • 配置:发布页称 verified score,但没有在文章中公开完整提示、样本划分、采样参数或工具轨迹。

输入/配置

官方发布页没有给出 ARC-AGI-2 的完整输入和执行 harness。产品示例层面,官方将模型用于复杂问题、多模态解释、数据合成和创意项目;开发者预览路径以 gemini-3.1-pro-preview 为准。

结果数据

  • ARC-AGI-2 verified:77.1%。

  • Google 称该分数超过 Gemini 3 Pro 的两倍;发布页没有在同一篇文章中给出 Gemini 3 Pro 的完整配置信息。

  • 产品定位:复杂问题和跨模态高级推理;发布时明确说明后续要继续验证 ambitious agentic workflows,再逐步走向一般可用。

结论

ARC-AGI-2 数据支持 Gemini 3.1 Pro 作为抽象推理强项候选;若用户任务是编码 Agent、SQL 或多工具编排,必须另做任务级评测,不能由单一 ARC 分数推导。

局限

  • 官方自报,发布文章未提供完整原始样本、提示词、随机种子、成本、失败类型和置信区间。

  • “verified”说明有验证过程,但仍不等于独立第三方复现。

  • preview 模型的 API、价格、速率和行为可能变化;不能把发布日状态当成永久规格。

  • 文章明确将 agentic workflow 作为继续验证方向,不能宣称其 Agent 能力已经全面稳定。

复现步骤

  1. 使用固定 gemini-3.1-pro-preview snapshot 和官方允许的 ARC-AGI-2 evaluation protocol。

  2. 记录 thinking level、temperature、工具、输入版本、输出和每题耗时;不要混用 Gemini app 与 API 结果。

  3. 另建编码、SQL、多工具任务集,按成功率、工具调用准确率、延迟和费用分项报告。

  4. 将官方 77.1% 作为发布基线,明确标注自己的 harness 是否可比。

能支持的判断

  • 支持把 ARC-AGI-2 作为官方定位信号

不能支持的判断

  • 支持把 ARC-AGI-2 作为官方定位信号;不支持复算该分数、推断所有任务胜率或把 preview 视为稳定 SLA。

方法、局限和复现

本文中的数字、任务集、推理档位和客户端条件只在所列来源及采集时点内成立。不同版本、不同 harness 或不同提供商的数据不能直接并排比较;未公开的参数保持未知。

需要复测时,请固定模型版本、提供商或客户端、推理档位、工具、任务集版本、样本数和采集日期,并记录失败、重试与人工修正。完整方法和复现步骤见下方来源笔记。

原始来源

Google Blog / Gemini models · The Gemini Team · 原文发布日期 2026-02-19 · 本站编辑日期 2026-09-20

打开原始来源

Gemini 3.1 Pro

在 Tabbit 中比较 Gemini 3.1 Pro

下载 Tabbit 客户端后检查模型可用性

相关评测

LayerLens Stratix 对 Gemini 3.1 Pro Preview 的六类基准实测LayerLens Stratix 用 14,549 个样本覆盖六类基准,显示 Gemini 3.1 Pro 在 ARC 与 BIRD-CRITIC 等任务间差异很大。Artificial Analysis 对 Gemini 3.1 Pro Preview 的 182 模型综合基准与端到端延迟实测Artificial Analysis 在第一方 API 上比较 182 个同价位模型,给 Gemini 3.1 Pro Preview 48 的 Intelligence Index、121.4 t/s 和 32.45 秒 TTFT,呈现高吞吐但高前置延迟。MindStudio 对 GPT-5.4、Claude Opus 4.6 与 Gemini 3.1 Pro 的三旗舰全任务实测MindStudio 用 HumanEval、SWE-bench、MATH、GPQA、MMLU Pro 及定制长文档任务比较三款旗舰;Gemini 的长上下文优势不能外推到所有代码修复。Google AI 开发者论坛:4000 词复杂系统提示词下 Gemini 3.1 Pro 的指令遵循实测一名 Antigravity Ultra 用户报告:约 4,000 词、含多阶段流程与负向约束的工程指令下,Gemini 3.1 Pro High 会跳过规划、缩短输出、长会话漂移或越权重构。Gemini 3.1 Pro 的简洁指令与长上下文定位提示Google 的 Gemini 3 指南建议保持直接简洁,并把长上下文中的具体问题放在资料末尾,用短语锚定回答范围。Gemini 3.1 Pro 的思考级别、结构化输出与工具配置Google 的官方文档将 thinking_level、默认 temperature、工具调用和 JSON schema 放在同一配置检查中,并区分 customtools 端点。Claude 主导规划、Gemini 隔离执行的 Spec 驱动编程工作流开发者论坛案例让 Claude 负责规格拆解与审计、Gemini 3.1 Pro 在新会话中隔离执行,再回到审计环节核对改动。Gemini 3.1 Pro 开源项目架构对齐与多模型结对编程工作流该 Antigravity 社区案例把成熟开源项目的架构资料注入 Gemini 3.1 Pro,再用第二模型做交叉评审和架构对齐。