2006WAIC刚刚落幕,直接落地做事的AI Agent 工具成为关注焦点。大家都在关心:你到底为用户创造了什么价值?技术的价值,永远要落地到具体的需求里。

那么在AI agent远控领域,从腾讯 Marvis、codex再到国民远程控制软件 ToDesk,各大厂商开始加码远程控制。这一次,小编测试了ToDesk AI 远控功能,从技术架构、智能体搭建、多端协同三个维度,体验AI远控领域,可以做些什么事?

一、AI 如何接管远程桌面
传统远程桌面工具的交互模型是"人-工具-远端桌面"的串行链路,用户需要全程手动操作。ToDesk AI 远控工具的核心创新在于基于Openclaw封装为能动手操作的AI Agent,该智能体具备以下能力模块:

  1. 自然语言理解:将用户的自然语言指令(含模糊描述)解析为结构化的操作步骤,零门槛实现用自然语言操作指令。
  2. 跨端调度引擎:通过GUI能力模拟(Computer Use)自动操作桌面,无需接入任何API。
  3. 多模型接入:支持接入 Kimi、千问、豆包、DeepSeek等主流大模型,按任务类型智能路由至最合适的模型实例。
  4. 技能(Skill)市场:提供可插拔的技能模块——文案撰写、数据分析、定时任务、客服自动回复等,按需组合,形成定制化工作流。
  5. 记忆系统:持久化用户偏好、反馈习惯和项目背景,使 AI 越用越精准。
    这套架构使得 ToDesk AI 区别于传统远程桌面方案:它不是简单的"远程看屏幕",而是一个能够 7x24 小时运行、自主执行任务、跨端协作的数字员工系统。

二、IM 即时通讯集成:微信 / 企微 / 飞书 AI 接入,实现文件传输
2.1 技术原理
ToDesk AI 通过 Bot 机制与即时通讯平台对接。Bot 作为消息中转层,接收用户的文本/语音指令后,经由 NLU 模块解析为操作意图(Intent),再由调度引擎映射到具体的目标设备与操作序列。整个过程基于 HTTPS Webhook 回调 + WebSocket 推送,延迟控制在秒级。
2.2 配置步骤
Step 1 — 绑定通信渠道:在 ToDesk AI 客户端中,依次进入「技能」→「绑定聊天工具」,选择微信 / 企业微信 / 飞书,扫码完成 Bot 与账号的关联。

在这里插入图片描述

Step 2 — 发送自然语言指令:无需记忆精确文件名,只需在 Bot 对话框中描述需求。例如:“从公司电脑桌面找到包含「引流数据」关键词的 Excel 文件,重命名为「6月第一周引流汇总」,发送到手机。”

Step 3 — AI 自动执行与回传:ToDesk AI 会依次执行:唤醒远端设备 → 遍历桌面文件 → 关键词模糊匹配 → 鼠标模拟重命名 → 文件传输至端侧。
在这里插入图片描述

2.3 适用场景
• 远程办公场景:外出时随时调取公司电脑文件,无需随身携带办公设备。
• 异地协作场景:分布式团队通过企微 Bot 共享资料,跨地域无缝衔接。
• 应急响应场景:突发需求时,一句话指令即可完成文件救火,减少沟通成本。

三、移动端远控:能一句话指令调度干活
ToDesk AI 远程控制软件的核心竞争力在于"智能体(Agent)"体系。用户可以通过新建智能体,为不同的业务场景创建专属的数字员工——从电商运营到自媒体创作,从数据分析到客服回复,均可实现自动化。
在这里插入图片描述

3.1 移动端远控pc端,PC端远控PC端
• 设备绑定:一个账号可远程连接多台设备,通过 @ 符号关联目标设备(如 “@admin的MacBookAir”),支持同时绑定多台设备实现并行任务分配。

3.2 任务执行流程
以新媒体撰稿为例,典型执行流程如下:
① 用户在新对话中输入指令:“基于桌面上的《品牌素材》文档和图库,撰写一篇 1000 字的热点文章,每段配产品图,生成 Word 文档并发送至手机。”
② AI 首先解析指令,生成分步执行计划,展示给用户确认。
③ 确认后,AI 依次执行:打开文档→读取素材→调用大模型生成文章→按段落插入图片→保存为 Word→文件传输。
④ 执行过程中,用户可通过实时画面监控进度,随时介入修改。
在这里插入图片描述

ToDesk AI 会将指令拆解为独立子任务,分别路由至对应设备执行。两个设备独立并行,互不阻塞。

3.3 典型应用场景
• 电商运营:一台设备自动抓取竞品数据、比价;另一台设备填写日报/周报。
• 客服场景:多台设备同时运行客服自动回复智能体,分流不同品类的用户咨询。
• 数据采集:多设备并行抓取不同数据源,汇总后自动生成分析报告。
• 渲染/转码:将重计算任务分发至多台设备并行处理,缩短等待时间。

短期看,“IM 远程驱动机本地 Agent + 可视化可追溯”​ 是最容易落地的产品形态。长期看,手机当遥控器,AI 在电脑里替你点鼠标,越轻、越私、越不用你盯着越好,这将成为AI远控的新趋势。

Logo

Agent 垂直技术社区,欢迎活跃、内容共建。

更多推荐