ChatGPT桌面版新增语音模式支持AI代理 封面图
行业资讯

ChatGPT桌面版新增语音模式支持AI代理

Heooo 07月24日21时59分 5 阅读

「OpenAI更新ChatGPT桌面应用,新增ChatGPT Voice语音模式,允许用户通过语音与AI代理交互并执行电脑任务。该功能基于本月发布的ChatGPT-Live语音模型,支持ChatGPT Work和Codex,可调用计算机使用技能访问网站和应用。macOS版本通过Appshots功能可读取屏幕内容。桌面版语音模式支持多步骤复杂指令,在演示中,开发者通过单一语音命令完成创建新线程、提交拉取请求和查找bug根因。Anthropic也更新了Claude的语音模式,支持在多个应用中完成任务。」

OpenAI近日宣布为其ChatGPT桌面应用带来重大更新,正式引入ChatGPT Voice语音模式。这项新功能让用户能够通过自然语音与AI代理进行对话,并直接控制AI在电脑上执行各类任务,标志着人机交互方式从文本输入向语音指令的重要演进。

ChatGPT桌面版新增语音模式支持AI代理

此次桌面端语音模式的核心技术基础,是OpenAI在本月早些时候发布的全新语音模型系列——ChatGPT-Live。该系列模型专为实时语音交互优化,能够更自然地理解用户意图并生成响应。与之前智能手机版本的语音模式相比,桌面版拥有更强大的能力:它不仅支持更流畅的对话和更好的打断处理,更重要的是具备了执行复杂操作的能力。

在功能覆盖方面,ChatGPT Voice同时兼容ChatGPT Work和Codex两大平台。通过计算机使用技能(computer use skills),语音助手可以直接访问和操作网站与应用。对于macOS用户,OpenAI还引入了Appshots功能,允许ChatGPT读取屏幕上的内容,包括图像的替代文本(alt-text),从而更全面地理解用户当前的工作上下文。

桌面版语音模式最引人注目的特性在于其对复杂多步骤指令的支持。用户不再需要将任务拆解为多个简单的文本命令,而是可以通过一段自然语音描述包含多个步骤的复杂工作流程。在OpenAI展示的演示视频中,一位开发者仅用一句语音指令,就让ChatGPT完成了创建新线程、提交拉取请求(pull request)以及查找bug根因三个连贯的开发操作。这种能力对于开发者、内容创作者和知识工作者而言,意味着工作流自动化进入了一个新阶段。

值得注意的是,OpenAI还打通了移动端与桌面端的体验。用户可以通过iOS应用远程访问Codex中的ChatGPT Voice功能,这意味着即使不在电脑前,也能通过手机语音触发桌面端的AI代理执行任务。这种跨设备协同设计,进一步扩展了语音助手的实用场景。

在OpenAI推出这一更新的同时,其主要竞争对手Anthropic也宣布更新了Claude的语音模式。Claude的语音能力可以调用Opus、Sonnet和Haiku等模型,在Gmail、Calendar、Slack、Notion和Canva等常用应用中完成任务。两大AI公司几乎同步推进语音交互能力,反映出行业对多模态、自然语言交互的重视程度正在快速提升。

ChatGPT桌面版新增语音模式支持AI代理

从技术角度看,ChatGPT桌面版语音模式的推出,标志着AI代理从“对话工具”向“执行代理”的转变。过去,语音助手主要停留在信息查询和简单任务处理层面,而ChatGPT Voice通过结合计算机使用能力和多步骤指令理解,实际上将语音变成了一个完整的操作界面。对于开发者而言,这意味着可以用语音直接驱动代码编写、调试和项目管理;对于普通用户,则可以用语音完成文档编辑、数据整理、网页浏览等日常操作。

不过,这一功能目前仍处于早期阶段。语音交互的准确性、对复杂语境的理解能力、以及在不同应用间的无缝切换,都还需要在实际使用中持续优化。OpenAI表示,未来将继续改进ChatGPT-Live模型,提升语音识别的鲁棒性和任务执行的可靠性。随着更多用户开始使用桌面版语音模式,OpenAI将收集反馈并迭代产品。

总体来看,ChatGPT桌面版语音模式的推出,不仅是产品功能的更新,更是人机交互范式的一次重要探索。当语音能够像键盘和鼠标一样成为电脑操作的核心输入方式时,AI代理的普及速度可能会进一步加快。对于整个AI行业而言,语音交互与代理能力的融合,正在开辟一个全新的应用空间。

# OpenAI # ChatGPT # 语音模式 # AI代理 # 桌面应用

来源:Heooo AI工具导航