豆包手机助手消费者版发布,跨应用Agent升级
「字节跳动正式发布豆包手机助手消费者版,在交互、记忆、Agent执行与安全四方面全面升级。新版本整合AI键指纹唤醒、连续语音对话与识屏能力,支持本地数据检索与屏幕内容保存,保留跨应用模拟点击与工具调用,并提出SAEP协议对Agent操作分层分级,已获多项安全认证。」
字节跳动近日正式发布豆包手机助手消费者版,在交互、记忆、Agent执行及安全等多个维度完成全面升级,推动手机AI从“问答”走向“自动办事”。
交互层面,新版本把AI键、语音与识屏三种入口整合到一起。AI键支持指纹鉴权,锁屏状态下可一键唤醒;长按即可发起实时问答,双击进入视频通话。语音唤醒支持连续对话(Beta)。屏幕识别能力则可基于当前页面直接完成翻译、问答或添加日程,实现“边看边办”的顺手体验。
记忆能力是本次升级的核心亮点。在用户授权后,助手可以安全检索相册、短信、录音等本地数据;同时支持手动保存屏幕内容,后续通过自然语言精准召回。面向办公场景,助手接入飞书妙记,可实现录音转写、实时翻译与自动总结,把零散的语音与文字资料转化为可检索、可复用的信息资产。
Agent执行方面,消费者版保留了“模拟点击加工具调用”的跨应用操作方式,覆盖电商比价、音乐添加、系统工具联动等典型场景。多任务处理支持排队与插队,锁屏状态下也能查看任务进度。用户还可通过快捷指令触发固定流程,但支付等高风险操作仍需本人确认,避免自动化带来的误操作风险。生活服务同步上线豆包购物比价,以及曹操出行能力,首批覆盖北京、杭州两地。
安全设计上,豆包手机助手采用端云结合的方式处理数据,遵循“最小必要”原则;同时提出SAEP协议,对Agent的操作进行分层分级管理,并配备全链路审计机制。官方信息显示,该产品已获得ISO27001、27701、42001及等保三级认证。
生态合作方面,豆包手机助手延续与中兴、努比亚的合作,具体适配机型以官方公告为准。业内观点认为,该版本把系统权限、记忆能力与自动执行串联在一起,有望成为日常生活中的AI入口,但第三方应用的稳定性以及敏感操作的授权管理,仍是其规模化落地需要面对的现实挑战。
来源:Heooo AI工具导航