9 月 14 日,字节跳动旗下 AI 助手豆包正式发布「豆包手机助手消费者版」。豆包是字节跳动开发的大模型 AI 助手——大模型就是用海量文本训练出来、能理解和生成文字的 AI 程序,普通用户通过手机或网页就能和它对话、让它帮忙办事;豆包手机助手是它的「手机专属版本」,权限更深,能读取屏幕内容、检索手机本地信息,还能在用户授权下替用户操作手机。这个消费者版主打稳定、日常可用,这轮发布有两个关键动作:一是首次以 Beta(测试版)形式向普通用户开放「操作手机」功能;二是同步推出屏幕自动化操作声明协议(SAEP),让第三方 App 可以明确「允许」或「拒绝」AI 在自己应用内自动操作,并启动为期 30 天的规则公示。这是国内手机 AI 生态里第一次出现这样的公开行业规则。
唤醒:语音 + 专属 AI 键,指纹验证一次即可
豆包手机助手支持语音、AI 键等多种唤醒方式,适配不同场景。其中专属 AI 键带有指纹鉴权能力——指纹鉴权就是用指纹确认「是机主本人在操作」。完成本人验证后,无需二次解锁,就能直接让助手执行任务,省去反复输密码、按电源键的步骤;语音唤醒则针对远场(手机离人较远)、车内噪音、嘈杂环境等场景做了专门优化。
屏幕问答:看到什么,就能就什么提问
新增的屏幕问答能力,让用户无需手动截图或切换应用,就能让助手结合当前屏幕内容处理任务。官方示例:用户打开相机对准室内环境,说「根据这个装修风格,帮我选一个一米二以内、价格不超过一千元的柜子」,豆包结合画面和需求,在电商平台上找到符合条件的商品。
本地搜索:相册、短信、便签都能翻
豆包手机助手提供本地数据搜索工具,可在用户需要时检索相册、短信、便签等信息。例如用户问「港澳通行证什么时候到期」,助手从手机里的相关信息中找到答案,而不是凭空猜测。
录音升级 + 飞书妙记:会后能直接追问细节
录音体验做了升级,并接入飞书妙记——飞书是字节跳动旗下的办公协作软件,妙记是它的语音转文字、自动生成会议纪要的工具。结合本地搜索能力,用户可以直接追问具体内容,比如「昨天用户访谈里提到的产品建议」。用户还可以通过语音输入、三指上滑,或同时按住 AI 键和音量键,手动保存当前屏幕内容,形成可在本地检索的记忆。
SAEP 协议:第三方 App 有权拒绝 AI 自动操作
这轮发布里规则意义最大的,是同步推出的屏幕自动化操作声明协议(SAEP)。SAEP 是一份关于「操作边界」的行业约定:AI 助手要在某个 App 内自动操作(比如自动填表、自动点击)时,按协议由第三方应用自主声明操作边界——允许、部分允许,还是拒绝。豆包手机助手尊重开发者意愿,对明确拒绝的第三方应用不会执行自动化操作。官方同步建立了 Agent 防护体系:Agent 指能自主执行任务的 AI 智能体,防护体系就是把 AI 可操作的范围分层、分级管理,防止越权。数据收集也遵循「合理必要」与「用户自主控制」原则。SAEP 的规则公示期为 30 天,官方表示希望与合作伙伴共建开放、规范的手机 AI 应用生态。
首发机型:努比亚 NaviX Ultra,9 月 16 日开售
首个搭载豆包手机助手消费者版的机型是努比亚 NaviX Ultra——努比亚是中兴通讯旗下的手机品牌,NaviX Ultra 是其全新旗舰机型。该机目前已开启预约,9 月 16 日正式发售。
这轮发布意味着什么
从功能到规则,这轮发布传递的信号是:手机 AI 助手正在从「只动嘴聊天」走向「动手干活」。屏幕问答、本地搜索、录音整理,都是让 AI 更深入参与用户手机里的真实事务;而 SAEP 协议说明,字节跳动在放开「自动操作」能力的同时,也在主动给 AI 划边界——把「允不允许 AI 碰我的应用」的选择权交给第三方 App 和用户自己。30 天规则公示期结束后,协议将如何落地、其他手机厂商是否跟进,值得持续观察。