豆包手机助手消费者版发布:开放操作手机功能
「豆包手机助手消费者版正式发布,主打稳定性与交互体验,支持语音、AI键唤醒,新增屏幕问答能力,录音体验升级并接入飞书妙记。同时以Beta形式开放“操作手机”功能,推出SAEP协议并启动30天规则公示,第三方应用可自主声明允许或拒绝AI自动化操作。」
豆包手机助手消费者版本正式发布。与此前推出的预览版相比,消费者版更强调稳定性与日常可用性,并将交互体验作为核心卖点。
在唤醒方式上,豆包手机助手支持语音、AI键等多种入口,以适配不同使用场景。专属AI键带有指纹鉴权能力,用户在完成本人验证后无需二次解锁,即可直接调用助手执行相关任务。语音唤醒则针对远场、内噪以及嘈杂环境进行了专门优化,力求在真实环境中保持稳定识别。
本次更新新增了屏幕问答能力。用户无需额外截图或切换应用,就能让助手结合当前屏幕内容继续处理任务。官方给出了一个示例场景:用户打开相机对准室内环境,说出“根据这个装修风格,帮我选一个一米二以内、价格不超过一千元的柜子”,助手即可结合画面与要求,在电商平台找到符合条件的商品。此外,豆包手机助手还为本地数据提供了搜索工具,可在用户需要时检索相册、短信、便签等信息;当用户询问港澳通行证的到期时间时,助手能够直接从手机内的相关信息中找到答案。
录音体验同样得到升级,并接入了飞书妙记能力。结合本地搜索工具,用户可以直接追问具体内容,例如“昨天用户访谈里提到的产品建议”。用户还能通过语音输入、三指上滑,或同时按住AI键和音量键等方式,手动保存当前屏幕内容,形成可在本地检索的记忆。
值得关注的是,豆包手机助手本次以Beta形式开放“操作手机”功能。官方希望与合作伙伴共建开放、规范的手机AI应用生态,为此推出了屏幕自动化操作声明协议SAEP,并同步启动为期30天的规则公示。根据协议,第三方应用可以自主声明操作边界,明确允许或拒绝AI助手在本应用内进行屏幕自动化操作。豆包手机助手将充分尊重开发者意愿,对明确拒绝相关操作的第三方应用不会进行自动化操作。这一机制相当于在手机AI与三方应用之间建立了可协商、可退出的协作边界。
在数据收集与处理方面,豆包手机助手遵循“合理必要”与“用户自主控制”原则,同时建立了Agent防护体系,对可操作范围进行分层、分级管理。
首个豆包手机助手消费者版本将由努比亚NaviX Ultra搭载,该机目前已开启预约,并定于9月16日正式发售。
来源:Heooo AI工具导航