Tabbit
活动资源博客模型
Tabbit LogoTabbit

Tabbit — 为你工作的 AI 浏览器

主题资源

  • AI Browser Resources
  • Agentic Browser Resources
  • Browser Downloads and Install Guides
  • Browser Comparisons
  • AI Browser Alternatives
  • Browser Productivity Resources

热门指南

  • AI Browser
  • Agentic Browser Download
  • Best AI Browser 2026: Top 9 Tested & Ranked
  • AI Browser Download
  • Free AI Browser
  • Best AI Browser 2026
  • AI Browser Comparison 2026
  • AI Browser for Windows
  • AI Browser for Mac
  • Chrome Alternative 2026

活动

  • 别装了,你在《牛来》里早有原型
  • Tabbit 妙招大赛
  • KPOP SBTI 饭圈人格测试
  • Tabbit 校园共创者计划
  • fifi 的论文文献妙招精选
  • 用户问卷

关于

  • Tabbit 博客
  • 媒体报道
测评
社区Kimi K2.7 Code

Devin 团队:FrontierCode Extended 基准与长程工程任务实测表现

原始来源

Reddit r/windsurf / Devin.ai (Cognition)

作者theodormarcu (Devin / Windsurf 团队工程师)

原文日期2026-06-24

Tabbit 整理2026-08-20

查看原文

一句话结论

在 Devin 团队针对真实软件工程任务构建的 FrontierCode Extended 独立基准中,Kimi K2.7 Code 取得 39.5% 的通过率,跻身与顶级闭源模型同台竞技的竞争梯队,在独立 UI 与自包含功能生成上表现出色,但在长序列多文件重构中受限于上下文窗口与记忆跨度。

测试环境、输入/配置

  • 评测基准:FrontierCode Extended(Devin / Cognition 团队用于衡量真实端到端软件工程任务的综合评测集)。

  • 运行环境:Devin Desktop 与 Devin CLI 真实 Agent 执行环境。

  • 模型对比组:Claude Opus 4.8、GPT-5.5、GLM 5.2、Kimi K2.7 Code。

  • 客户端限制:Devin 客户端在实测期间对 K2.7 / GLM 5.2 分配的上下文上限约为 200K tokens。

结果数据

FrontierCode Extended 官方发布成绩(通过率):

模型模型类型FrontierCode Extended 成绩
Claude Opus 4.8闭源前沿旗舰51.8%
GPT-5.5闭源前沿旗舰44.8%
GLM 5.2开源权重 MoE43.0%
Kimi K2.7 Code开源权重 MoE39.5%

社区开发者在真实工程中的反馈分布:

  • 自包含功能 / UI 任务:Kimi K2.7 生成速度极快,响应敏捷,代码直接可用度高。

  • 大型长程重构(>15 个文件连续修改):当 Agent 需要在处理第 915 个文件时保持对前 18 个文件修改状态的精确记忆时,表现出现衰减。

结论

  1. 开源模型进入第一梯队:Kimi K2.7 Code(39.5%)与 GLM 5.2(43.0%)在真实复杂工程任务上展现出了接近顶级闭源模型(GPT-5.5 44.8%)的解决能力。

  2. 任务适用分水岭:

    • 高胜率场景:单功能完整开发、独立模块重构、UI/前端页面实现、单元测试补全。

    • 挑战场景:涉及 15 个以上关联文件的长程级联重构、跨多仓库依赖同步修改。

局限

  • FrontierCode Extended 包含 Devin 平台特定的 Agent 工具集与执行反馈机制,换用其他 Agent 框架(如 SWE-agent 或 Aider)可能产生不同通过率。

  • 客户端在测试时限制了 200K 上下文,未完全发挥模型原生的 256K 潜力。

复现步骤

  1. 在 Devin Desktop / CLI 中选择 Kimi K2.7 Code 作为底层执行模型。

  2. 设定包含独立功能创建和多文件重构的两类工程任务。

  3. 记录任务执行轮数、工具调用成功率、最终编译/测试通过状态以及 Token 消耗。

原始证据与数据

Devin 团队工程师 theodormarcu 在官方公告中发布了上述具体百分比分数,并明确了对比基准为 FrontierCode Extended。

来源摘录或观察(仅做合规短引)

  • 官方公告:“GLM 5.2 scores 43.0% and Kimi K2.7 scores 39.5% on FrontierCode Extended — placing them in a competitive tier alongside GPT-5.5 (44.8%) and Claude Opus 4.8 (51.8%).”

  • 社区资深开发者观察:“200k covers most single-feature work but shows up on large refactors — when you're touching 15 files in sequence and need the model to hold what changed in files 1-8 while working on 9-15, the ceiling matters.”

Tabbit 小编提醒

本文是第三方资料导航。测试环境、模型版本和主观体验可能不同,请以原文为准。

Kimi K2.7 Code

在 Tabbit 中使用并对比模型

Kimi K2.7 Code

相关测评

社区Reddit,r/kimi

Reddit 社区:Kimi K2.7 Code 与 K2.6/K2.5 的选型边界

媒体Hugging Face / Moonshot AI 官方 Model Card2026-06-12

Kimi K2.7 Code:Hugging Face 官方模型规格与全量基准数据

社区Unsiloed AI Engineering Blog / Reddit r/LangChain2026-07-20

Unsiloed 评测:Kimi K2.7 Code 与 GLM 5.2 真实代码生成与大型仓库分析受控对比

社区Reddit r/opencode2026-08-04

OpenCode 社区:真实 Agent 编码成本与工具循环效率实测对比

Kimi K2.7 Code

相关提示词

媒体Kimi API Platform 官方文档

Kimi K2.7 Code 官方接入与长程编码提示工作流

媒体Kimi API Platform 官方文档

Kimi K2.7 Code:Claude Code 官方接入配置与多层级模型映射

媒体Kimi API Platform 官方文档 / Hugging Face Model Card2026-06-12

Kimi K2.7 Code:多模态视频工具调用与 Agent 循环实现

社区GitHub Blog Changelog2026-07-01

Kimi K2.7 Code:GitHub Copilot 官方集成与企业策略配置