返回资讯首页

当 AI 学会“点鼠标”:WorkBuddy 推倒“接口墙”,企业 AI 的分水岭变了

小派2026年11月21日

当 AI 学会“点鼠标”:WorkBuddy 推倒“接口墙”,企业 AI 的分水岭变了 - 配图1

企业上 AI 智能体,最容易卡在一个不起眼的地方:系统没有接口。用了十几年的仓储客户端、资产台账、财务软件,没有 API,接不进连接器,也没有网页版。智能体再聪明,也只能看着屏幕干着急。11 月 20 日,腾讯做了一件事,把这道墙推倒了一角——WorkBuddy 上线”电脑操控”(Computer Use)能力;同一天,混元 Hy4 宣布全量开源,把视觉理解与电脑操作写进了开源权重。两件事指向同一个判断:智能体的竞争,正从”接不接得上”转向”懂不懂行”。

不是模型更聪明,是它终于有了手

过去的智能体,本质上是”对话+调用”:靠 API 和连接器去够系统。够得着的,是那些愿意开放的现代软件;够不着的,恰恰是沉淀了最多业务数据的老旧客户端。Computer Use 换了一条路——不再要求软件开口,而是让 AI 学会像人一样看屏幕、动手。它能识别当前页面和客户端界面,执行点击、输入、滚动,不需要目标软件开放接口,就能在后台操作。用户在对话框里描述任务,执行过程能在侧边画中画小窗里看,涉及提交的动作由人来确认。这不是又多了一个功能,而是智能体第一次有了不依赖接口的手。

把”接口墙”换成”看得见”

这背后的范式转移值得拆开看。传统自动化的前提是”系统开放”——API(应用程序接口)、MCP(模型上下文协议)、连接器,本质都是让软件主动递出一只手。Computer Use 反过来,用视觉定位(GUI Grounding)看懂界面,再用键鼠模拟去操作,把前提从”系统开放”改写成”人能看见”。这个改写意义重大:企业里大量老旧系统不会被替换,它们没有接口,但有界面;只要界面还在,AI 就能接手。从”连接”到”操作”,被打开的不是一个系统,而是一整类过去自动化的盲区。

会点鼠标,不等于会办业务

但这里有一道必须讲清的分水岭。官方自己也把边界摆在明面上:界面识别效果因软件而异;登录、授权、支付、提交、删除这类敏感操作,建议用户在场、实时监控;任务完成后还要回到原系统核对结果。换句话说,”能点”和”点得对”是两回事。举个官方给的场景:在仓储系统查到货信息,再到资产系统核对登记,两个软件之间没有数据接口,靠的是用入库单号这类共同信息把流程串起来。认得”入库单号”三个字是视觉能力,知道该用它来串联两个系统、知道哪一步算核对完成,是业务知识。界面上看不到这些。工具给的只是手,判断力还得来自别处。

这不是纸上推演。11 月 21 日,一场面向开发者的落地沙龙把主题直接定为”做得出来,用得起来”,其中一场分享的题目就叫《驻场 100 天:一个 FDE 的大规模落地手记》。”做得出来”和”用得起来”被特意拆成两件事,恰恰说明行业已经意识到:演示里点得动,和客户现场天天用得稳,中间隔着一百天的活。电脑操控把”手”的问题解决得越漂亮,”手往哪里伸、按什么规矩伸”的问题就越突出。

Hy4 开源,把”手”交到企业自己手里

同一天开源 Hy4,把这件事又往前推了一步。这个总参数 7700 亿、激活 490 亿、上下文超过 100 万 Token 的旗舰模型,首次把视觉理解和电脑操作写进权重;采用 Apache 2.0 协议,企业可以自己下载部署。对普通用户,这意味着多一个选择;对要求数据不出域、核心系统跑在内网的企业,意义不同——”看屏幕、动手干活”的能力,第一次有了私有化落地的可能,不必把界面内容交给外部。能力在变便宜、变可得,但”知道该点哪里、按什么顺序点、点完怎么核”这件事,并不会随开源自动到账。门槛没有消失,只是从”有没有工具”挪到了”懂不懂业务”。

企业该换的三把尺子

面对这种变化,选型标准也该更新。有三条可以自查。第一,流程讲不讲得清:Computer Use 把自动化的门槛降到”人能把步骤说明白”,讲不清的流程,交给 AI 只会更快地把错做完。第二,经验封装成什么:零散的提示词撑不起规模化,真正能复用、能分发的,是把”用什么字段串联、什么条件触发、异常怎么处理”沉淀成标准 Skill。第三,谁来补那层”看得懂界面、又听得懂行话”的能力:通用平台给了手和眼,但业务语义那一层,往往要靠懂这个行业的人来装。谁补上这层,谁才真正把工具变成了生产力。

从”接不接得上”到”懂不懂行”,WorkBuddy 推倒的不只是一道接口墙。当”手”和”眼”都变成可获取的基础能力,剩下的差距,就落在那些屏幕上看不见、却决定业务成败的东西上——它们叫行业经验,叫业务规则,也可以被封装成一个个能干活的数字员工。工具越来越像水电,真正值钱的,是你往里装了什么。

采购企业版 Workbuddy 选商派 ShopeX!

2026 年 7 月,商派 ShopeX 与腾讯云 WorkBuddy 企业版达成代理合作,成为企业版 WorkBuddy 官方授权代理商。

这意味着通过商派采购企业版 WorkBuddy,你拿到的依然是腾讯原厂的企业版 WorkBuddy(旗舰版 / 专享版 / 私有化版三档交付形态),但叠加了商派在零售数智化领域的垂直能力封装,后续企业想要基于 WorkBuddy 定制一些落地场景,可以直接跟商派进行 FDE 合作。

商派旗下 2C 商城系统、B2B 业务系统、OMS 中台 通过自定义 MCP 连接器与 Skill 技能工具,全面接入企业版 WorkBuddy。

订单路由策略、库存调度逻辑、B2B 授信返利规则、全渠道对账口径等”只可意会”的零售经验,被封装成可复用、可分发、可迭代的标准 Skill。

💡 简单说:腾讯 WorkBuddy 是”懂 AI 但不懂零售”的通用智能体平台;商派补上的正是”听得懂零售行话”的那一层。

免费咨询热线400-821-3016
在线咨询