在作者的一篇 6,000 词小说和 90 处预埋错误上,Hydrogen 分四类检查时检出 84 处(93%);把四类检查合并为一次提示后检出 68 处(76%)。这组结果支持分项检查优于一次包办的判断,不代表通用文稿编辑准确率。
适合判断的任务:单篇英文小说中的语法与拼写、重复、冗余和前后矛盾检查。
不适合外推的任务:中文编辑、自然写作质量、开放式润色,以及其他文体或模型调用环境。
适用的模型版本:Hydrogen;具体模型 ID、修订版未注明。
测试环境或客户端:结果页称各模型通过 API 测试;Hydrogen 的具体提供方路由、客户端及调用方式未注明。
推理档位和参数:未注明。测试页只概述各模型使用能在几分钟内检查完整章节的思考量,多数为默认档或 medium/high,未给出 Hydrogen 的实际设置。
作者在一篇约 6,000 词的原创短篇小说中预埋 90 处问题:45 处语法或拼写问题、15 处重复、15 处冗余、15 处前后矛盾。每类单独使用一次提示,另有一次要求同时检查四类问题的合并提示。提示词据称从 icanwrite 编辑器的检查提示改写后冻结,各模型使用相同指令。
若模型评论落在预埋问题处即计为检出;评分使用文本匹配,不由另一个模型裁判。评论引用超过 300 个字符不计为检出。测试页没有说明 Hydrogen 是否重复运行,因此不能判断波动范围。
分项检查共检出 84/90(93%):语法与拼写 41/45,重复 14/15,冗余 15/15,一致性 14/15。页面列出 89 条评论和 1 条额外标记。
合并提示检出 68/90(76%):语法与拼写 41/45,重复 8/15,冗余 9/15,一致性 10/15;比四类分开检查少检出 16 项。页面列出 71 条评论和 3 条额外标记。
分项检查漏掉的六项包括四处语法问题、一处跨章节重复(“gleaming”)和一处人物年龄矛盾。合并提示漏掉 22 项,包含重复、冗余与一致性问题。
结果页记录分项检查耗时 42 秒、成本 $0.26;合并提示 40 秒、成本 $0.11。同页的 Argon 分项检查为 84/90、26 秒、$0.12;合并提示为 80/90、48 秒、$0.05。它们是该页面报告的单次成绩,不能据此断言稳定差异。
| Hydrogen 检查方式 | 语法/拼写 | 重复 | 冗余 | 一致性 | 合计 | 额外标记 | 用时 | 成本 |
|---|---|---|---|---|---|---|---|---|
| 四类分开检查 | 41/45 | 14/15 | 15/15 | 14/15 | 84/90 | 1 | 42 秒 | $0.26 |
| 四类合并一次检查 | 41/45 | 8/15 | 9/15 | 10/15 | 68/90 | 3 | 40 秒 | $0.11 |
额外标记是评论未命中预埋项的计数;页面没有给出 Hydrogen 每条额外标记的判定细节。测试只有一篇文章,错误类别和数量固定。
这项测试中,Hydrogen 对分项明确的校对任务检出率较高,尤其完整检出 15 处冗余;一次要求覆盖全部类别时,漏检主要增加在重复、冗余和一致性类别。实际使用可据此将检查拆成多个针对性步骤,但本测试没有比较编辑后的可读性、误改率或人工编辑偏好。
样本仅为一篇预埋错误小说,且未公开完整提示词、Hydrogen 的具体模型 ID、推理参数和重复运行数据。93% 是这篇样本上的命中比例,不是大规模语料上的总体准确率;结果也不能证明模型在自然文本中的召回率或精确率。额外标记虽可提示误报可能性,但页面没有公开其具体内容与人工判定。
结果页公开了问题类别、数量、命中规则、Hydrogen 漏检项、分项成绩、时间和成本;可点击模型条目查看其评论。页面没有公开小说全文、四类提示词全文、API 请求参数或调用日志,因此无法独立逐项复跑并验证评分。对照其他模型时应限于该测试页面、同一小说和其冻结提示词,不外推为跨任务排名。
Gemini 4 Hydrogen