就在 AI 智能体手机 NaviX Ultra 发布会前夕,努比亚方面在预热活动中公布了这款新机的大量 AI 功能。作为 NaviX Ultra 的 AI 能力供应商,豆包手机助手消费者版也同期亮相。相比于当初被全网 " 围剿 " 的豆包手机助手预览版,消费者版就充分汲取经验,推出了屏幕自动化操作声明协议(SAEP),允许第三方应用声明是否接受豆包 AI 助手在应用内进行屏幕自动化操作。

据豆包方面介绍,第三方应用可通过 SAEP 协议明确允许或拒绝豆包手机助手的相关操作,而对于拒绝的应用,则将不进行自动化操作。开发者可以禁止登录页面的截图和模拟输入,也能允许 AI 助手辅助编辑内容,但限制其完成最终发送或发布,包括签到、抽奖、秒杀、积分及奖励领取,都能被列入可限制的操作范围。

毕竟一朝被蛇咬十年怕井绳,当初豆包手机助手技术预览版在问世后被微信、淘宝、京东、美团以及一系列金融应用集体 " 拉黑 "。彼时,豆包手机助手采用的是 GUI Agent(图形界面智能体),核心能力是通过视觉理解与自然语言交互来实现自动化操作。
具体来说,此前的豆包手机助手技术预览版是通过 Android 系统的无障碍服务,向系统注入模拟的用户输入事件,从而实现模拟点击和读屏的效果,最终完成复杂的跨 App 连续操作。GUI 路线的优势在于技术难度低,因为 Android 系统为残障人士提供的无障碍服务,就可以让 AI 轻松地感知手机上发生的每一件事。但它的缺陷同样突出,当人不再需要亲自操作手机时,消费互联网的底层逻辑也就发生了变化。

在互联网厂商的视角下,App 的数据和功能都是自己的资产,其他人不能染指,例如微信的聊天记录是腾讯的,淘宝的购物数据是阿里的,美团外卖的订单数据是美团的。然而豆包手机助手的核心是模拟人类操作,比如要求豆包手机助手买个自嗨锅,豆包会直接帮你在淘宝上比价后下单。
此时虽然自嗨锅卖出去了,但淘宝的开屏广告、商家购买的直通车广告都被豆包手机助手看了。将广告展示给 AI,无疑就相当于给瞎子抛媚眼,所以互联网厂商当然就不干了。因此微信、淘宝等 App 抓住了 GUI 路线存在安全隐患这一缺陷,集体将其拒之门外。

SAEP 协议的可行性体现在给予了第三方应用选择权,从而规避 " 举世皆敌 " 的窘境。可问题在于,第三方应用为什么会选择拥抱豆包手机助手,当初豆包手机助手被集体抵制不就是因为它伤害了友商的利益?对于微信、美团、淘宝等第三方应用来说,豆包手机助手的自动化操作对自身有害无益。
用户获得便捷并不等于自己能赚到钱,这就是豆包手机助手 " 扩大朋友圈 " 的最大难关。字节跳动需要想到一个让第三方应用也能通过豆包手机助手获益的方式,比如买量就是个不错的选项。
【本文图片来自网络】