跨 OS GUI 智能体基础设施白皮书:人机交互第三次革命
跨 OS GUI 智能体基础设施白皮书:人机交互第三次革命
来源类型: 行业白皮书
日期: 2026-06-17
标签: #GUIAgent #跨OS #人机交互 #甲子光年 #庭宇科技 #Lybic #边缘智算 #Chat时代到Act时代
核心论点
GUI Agent 正在引发继"命令行"到"图形界面"之后的第三次人机交互革命——核心是通过 UI 直接进行操作,从"人操作机器"转向"机器理解并执行人的意图",使操作系统回归"用户意图执行者"的本质。
三大时代划分
| 时代 | 交互方式 | 范式 |
|---|---|---|
| 命令行时代 | 文本命令 | 人理解机器语言 |
| 图形界面时代 | 鼠标点击 | 人操作图形元素 |
| Act 时代 | 意图表达 | 机器理解并执行人的意图 |
OpenClaw 的横空出世,宣告全球人工智能正式从 Chat 时代走到 Act 时代。
API Agent 路线的三大障碍
1. 覆盖率瓶颈
- API Agent 高度依赖 API 接口
- 初步估计全球当前仅有不到 5%的软件开放了完整的 API 接口
- Agent 在数量巨大的"黑盒"软件面前寸步难行
2. 认知维度缺失
- 多数 API Agent 仅能在数据层面进行交互
- 丢失了界面布局、图标隐喻等关键的视觉上下文信息
3. 跨生态协作割裂
- 受限于接口壁垒
- 传统 Agent 往往沦为单一软件内的"半自动"工具
- 难以处理跨平台、跨应用的长链路复杂任务
GUI Agent 的核心定义
"GUI Agent 是一种基于多模态大模型,能够模拟人类用户,通过视觉感知和模拟操作,直接与多端图形用户界面进行交互的智能体。"
核心优势
- 摆脱对 API 接口和 RPA 脚本的依赖
- 通过强大的视觉语义理解
- 打破应用间的数据围墙
- 实现真正的跨 App / 跨平台 / 跨生态操作
战略意义
"将智能设备从刻板的'代码执行者'进化为灵活的'意图代理人',从根本上重塑了人机交互范式,是人类通往通用人工智能道路上的里程碑式跨越。"
庭宇科技:边缘智算 + GUI Agent
公司定位
- 国内最大分布式 GPU 算力池运营方
- 覆盖全国超 1500 个县市 + 东南亚
- 高性能边缘节点网络
- 基础设施深度赋能云桌面 / AI Agent
产品矩阵
- 边缘云(基础设施)
- GUI Agent(Lybic)(2025-10 发布,国内首个基于边缘智算架构的 GUI Agent)
- 云手机 / 云电脑(终端)
Lybic 核心优势
- 毫秒级延时
- 高安全保障(沙箱)
- 全场景适应(全模型 + 全工具链开放生态)
- 解决 GUI Agent 的延迟长 / 精度差 / 安全保障低三大痛点
白皮书核心内容
本白皮书由庭宇科技 + 甲子光年 + 铸基计划联合发布,涵盖:
1. GUI Agent 概念
2. 发展阻碍
3. 技术架构 + 核心实现
4. 产品形态 + 场景落地
5. 未来 + 展望
与已有知识的关联
- wiki/entities/tingyu-tech — 庭宇科技
- wiki/entities/jiazi-zhi-ku — 甲子智库
- wiki/entities/lybic — Lybic(GUI Agent)
- wiki/concepts/gui-agent — GUI Agent
- wiki/concepts/edge-computing — 边缘智算
- wiki/concepts/act-era — Act 时代
- wiki/concepts/cross-os-automation — 跨 OS 自动化
- wiki/concepts/sandbox-agent — 沙箱 Agent
资料来源
- 原文:https://mp.weixin.qq.com/s/KC2DvUHaC0JTPCXPeZtwbg
- 原始文件:
raw/articles/微信文章3/跨OS GUI智能体基础设施白皮书——重新定义人机交互自动化|甲子光年智库_2.md - 发布方:庭宇科技 + 甲子光年 + 铸基计划
我的判断(高置信度)
这是 2026 年中国 GUI Agent 领域最系统的白皮书——庭宇科技是边缘智算 + GUI Agent 先行者。
关键洞察:
1. "覆盖率 < 5%"是 API Agent 的致命缺陷——GUI Agent 是必然路径
2. "5% vs 95%"是 GUI Agent 的市场空间——绝大多数软件只能通过 UI 操作
3. 庭宇科技的"边缘智算 + GUI Agent"组合是独特的——竞品 Anthropic / OpenAI 没有边缘算力
4. "沙箱"是 GUI Agent 关键基础设施——Lybic 沙箱保障安全性
预测:
- 2026 H2:GUI Agent 渗透率将达 30%+
- 2027:可能诞生"GUI Agent 操作系统"(参考 Android 模式)
- 2028:跨 OS GUI Agent 将成为"通用 Agent"的事实标准
- 对企业的建议:
- 评估 Lybic / 庭宇科技作为 GUI Agent 供应商——边缘智算差异化
- 关注"GUI Agent + 业务系统"——而非纯 API Agent
- 对开发者的建议:
- GUI Agent 技能是新增值——前端 / UI 测试 / 跨平台自动化
- 关注 Lybic 沙箱技术——学习 Agent 安全的最佳实践
- 对工具派的启示:
- "覆盖率 < 5%"是 GUI Agent 创业者最大机会——避开了 API Agent 红海
- 边缘智算 + GUI Agent = 基础设施差异化——避免与 Anthropic 正面竞争