Tabbit博客

用 Perceptron Mk1 辅助已登录网页任务

让 Perceptron Mk1 读取视觉信息,再把已核对的步骤交给能操作 Tabbit Browser 的本地 Agent。

本文目录
  1. 用 Mk1 读取视觉信息
  2. 把操作交给本地 Agent
  3. 先从小任务开始并保留人工检查
  4. 提示词
  5. 延伸阅读

Perceptron Mk1 是视觉与视频模型,不是浏览器操作者。让它读取截图或视频,再把简短且核对过的步骤交给能运行 Tabbit CLI 的本地 Agent。OpenRouter 当前列出的准确模型路由是 perceptron/perceptron-mk1,但目前 OpenRouter 页面混有 Mk1 与 Mk1.5 的能力描述,不应仅凭模型名称假设支持工具。应先确认所选服务商路由的能力,并让 Mk1 只承担已核实的视觉判断。让 Mk1 负责视觉判断,由具名本地 Agent 在单独的 Tabbit 任务标签页执行网页操作。 Perceptron 发布说明 · OpenRouter 模型页

用 Mk1 读取视觉信息

Perceptron 将 Mk1 定位为视频与具身推理模型。官方介绍涉及图片和视频理解、视觉定位、OCR 以及结构化标注。它可以用来读取页面截图上的状态,或从视频中定位某个时刻,但这不代表它能操作浏览器。

OpenRouter 搜索结果曾显示该路由不支持函数调用,但当前页面文本混入 Mk1.5 描述。应把工具支持视为未确认,直到核实所选端点。点、框、多边形和视频片段时间戳等空间结构化输出仍然只是模型结果,不是点击动作。要操作已登录网页,应使用另一个能调用本机浏览器工具的 Agent。

任务使用方式开始前检查
读取截图或视频Perceptron Mk1模型路由是否接受该媒体输入
导航网页或填写字段本地 Agent + Tabbit CLI本机工具权限和网站登录状态
读取信息后继续操作Mk1 负责识别,Agent 负责操作将提取字段逐项与页面核对
只有远程 Agent使用受支持的本地交接(如有)确认客户端确实支持交接

把操作交给本地 Agent

使用客户端自己的技能发现方式加载 Tabbit skill。Pi 使用 /skill:tabbit;部分客户端使用 /skills 或自动发现已安装技能。加载说明不代表 Tabbit CLI 启动器正常、所选模型服务可调用 perceptron/perceptron-mk1,也不代表目标网站已登录。这些条件应分别检查。

Tabbit CLI 在现有 Tabbit Browser 环境中运行,可以复用网站登录状态,前提是账号有相应权限。为任务新建并命名一个标签页,你仍能继续使用其他标签页。纯远程 Agent 需要另有受支持的本地交接方式;模型可用不等于它能访问本机浏览器。

能力Perceptron Mk1对浏览器流程的影响
图片与视频理解官方定位能力可用于读取视觉证据
结构化空间标注明确指定的输出模式只是待核对的数据,不是动作
OpenRouter 路由的函数调用不支持不要让该端点点击网页
网站会话访问模型不提供在本地浏览器中使用 Tabbit CLI

先从小任务开始并保留人工检查

先使用示例测试页,不要直接处理重要表单。让 Mk1 读取版本说明截图,再让本地 Agent 打开对应页面,核对可见标题和版本号,并保存名为 Mk1 版本说明草稿 的草稿。草稿应显示来源 URL、提取字段和不确定项,由人检查后再分享。

这是示例流程,不表示 Mk1 或 Tabbit 已经完成过实时测试。如果字段看不清,或截图与页面不一致,应暂停并请人检查,不要猜测。

提示词

请把这张截图作为版本说明草稿的依据。返回 JSON,字段包括 visible_title、visible_version、exact_visible_status、evidence_text、confidence(0 到 1)和 needs_human_check(布尔值)。不要推断页面未显示的内容。看不清的字段请返回 null。

延伸阅读

阅读 Tabbit CLI 完整指南、了解如何将 Agent 连接到现有浏览器、按首次浏览器 Agent 任务清单检查流程,或比较browser MCP 与 CLI。Codex Tabbit CLI 设置指南提供客户端示例。也可查看复用登录会话、在本机验证网页应用和带来源进行浏览器研究。

常见问题

Perceptron Mk1 能点击网页按钮吗?

OpenRouter 上的 `perceptron/perceptron-mk1` 路由不支持函数调用。网页操作应交给另一个本地 Agent。

应该配置哪个模型 ID?

OpenRouter 列出的准确 ID 是 `perceptron/perceptron-mk1`。开始前先确认所选 Agent 客户端能调用该模型。

结构化输出代表模型能操作浏览器吗?

不是。结构化标注只是模型响应格式,不会提供浏览器控制能力或已登录会话。

Tabbit CLI 能复用已登录的网站会话吗?

Tabbit CLI 在现有 Tabbit Browser 环境中运行;如果账号有访问权限,可以复用网站登录状态。

如何复核浏览器任务?

保存带有来源 URL 和提取字段的具名草稿。逐项对照页面内容,并在提交或发布前停下等待人工复核。

下一步

让 Tabbit 与你并肩工作。

跨标签页调研、自动化重复的浏览器工作,让每一处上下文都触手可及。