行业资讯

豆包虚拟桌面上线可操作Windows

Heooo 08月18日16时34分 30 阅读

「豆包工作任务模式推出虚拟桌面功能,已在Windows版本上线。通过授权和技能栏操作,豆包能像人一样查看屏幕、移动鼠标、点击和输入,完成跨软件复杂任务。该功能基于通用GUI能力,无需MCP、API或插件,且不干扰用户操作,用户可实时观看并随时接管。」

豆包客户端近期推出了全新的工作任务模式,其中一项关键能力——虚拟桌面,已经在Windows版本正式上线。这项功能将AI助手从简单的对话问答,推进到能够直接操作电脑界面的新阶段。

根据豆包官方消息,用户只需在电脑端选择工作任务模式,并选择本地电脑,然后在技能栏中点击“操作电脑”并完成授权,即可开启虚拟桌面。在虚拟环境中,豆包能够像人类用户一样查看电脑屏幕、移动鼠标光标、点击按钮以及敲击键盘,从而在电脑端继续执行复杂的多步骤任务。这意味着,一些需要跨应用、跨网页完成的流程,例如数据整理、信息检索、文件操作等,都可以交由豆包在虚拟桌面中自动推进。

值得注意的是,虚拟桌面采用的是更为通用的图形用户界面(GUI)能力。即使在没有MCP(模型上下文协议)、API、插件或CLI(命令行接口)支持的环境下,豆包也能直接“看懂”屏幕上的界面元素并完成相应操作。这一设计显著降低了技术门槛,使得AI操作电脑不再依赖于特定软件的后门或接口,增强了其泛用性和适用范围。

在实际使用体验上,虚拟桌面运行在独立的隔离环境中,不会干扰用户当前正在进行的其他工作。豆包在操作应用或浏览网页时,不会占用用户的鼠标和键盘,也不会打断用户正在进行的操作。用户可以在豆包执行任务时,继续使用自己的电脑进行其他工作,实现人机并行。

此外,整个操作过程是透明可见的。用户能够通过虚拟桌面实时查看豆包每一步的操作动作,从而了解任务进度和逻辑。如果在执行过程中发现问题,或者用户希望亲自处理某些细节,可以随时暂停豆包的操作,或者直接接管控制权,转为人工操作。这种设计在保障自动化效率的同时,也为用户保留了足够的掌控力和灵活性。

豆包虚拟桌面的上线,代表着AI助手在“智能体”方向上的进一步探索。它将语言模型的理解能力与图形界面的操作能力相结合,有望推动更多日常办公场景的自动化升级。对于普通用户而言,这种无需编程、无需复杂配置的交互方式,也降低了AI赋能工作的使用门槛。

# 豆包 # 虚拟桌面 # AI智能体

来源:Heooo AI工具导航