跨 OS GUI 智能体基础设施白皮书:人机交互第三次革命

394 字

跨 OS GUI 智能体基础设施白皮书:人机交互第三次革命

来源类型: 行业白皮书
日期: 2026-06-17
标签: #GUIAgent #跨OS #人机交互 #甲子光年 #庭宇科技 #Lybic #边缘智算 #Chat时代到Act时代

核心论点

GUI Agent 正在引发继"命令行"到"图形界面"之后的第三次人机交互革命——核心是通过 UI 直接进行操作,从"人操作机器"转向"机器理解并执行人的意图",使操作系统回归"用户意图执行者"的本质。

三大时代划分

时代 交互方式 范式
命令行时代 文本命令 人理解机器语言
图形界面时代 鼠标点击 人操作图形元素
Act 时代 意图表达 机器理解并执行人的意图

OpenClaw 的横空出世,宣告全球人工智能正式从 Chat 时代走到 Act 时代

API Agent 路线的三大障碍

1. 覆盖率瓶颈

  • API Agent 高度依赖 API 接口
  • 初步估计全球当前仅有不到 5%的软件开放了完整的 API 接口
  • Agent 在数量巨大的"黑盒"软件面前寸步难行

2. 认知维度缺失

  • 多数 API Agent 仅能在数据层面进行交互
  • 丢失了界面布局、图标隐喻等关键的视觉上下文信息

3. 跨生态协作割裂

  • 受限于接口壁垒
  • 传统 Agent 往往沦为单一软件内的"半自动"工具
  • 难以处理跨平台、跨应用的长链路复杂任务

GUI Agent 的核心定义

"GUI Agent 是一种基于多模态大模型,能够模拟人类用户,通过视觉感知和模拟操作,直接与多端图形用户界面进行交互的智能体。"

核心优势

  • 摆脱对 API 接口和 RPA 脚本的依赖
  • 通过强大的视觉语义理解
  • 打破应用间的数据围墙
  • 实现真正的跨 App / 跨平台 / 跨生态操作

战略意义

"将智能设备从刻板的'代码执行者'进化为灵活的'意图代理人',从根本上重塑了人机交互范式,是人类通往通用人工智能道路上的里程碑式跨越。"

庭宇科技:边缘智算 + GUI Agent

公司定位

  • 国内最大分布式 GPU 算力池运营方
  • 覆盖全国超 1500 个县市 + 东南亚
  • 高性能边缘节点网络
  • 基础设施深度赋能云桌面 / AI Agent

产品矩阵

  • 边缘云(基础设施)
  • GUI Agent(Lybic)(2025-10 发布,国内首个基于边缘智算架构的 GUI Agent)
  • 云手机 / 云电脑(终端)

Lybic 核心优势

  • 毫秒级延时
  • 高安全保障(沙箱)
  • 全场景适应(全模型 + 全工具链开放生态)
  • 解决 GUI Agent 的延迟长 / 精度差 / 安全保障低三大痛点

白皮书核心内容

本白皮书由庭宇科技 + 甲子光年 + 铸基计划联合发布,涵盖:
1. GUI Agent 概念
2. 发展阻碍
3. 技术架构 + 核心实现
4. 产品形态 + 场景落地
5. 未来 + 展望

与已有知识的关联

资料来源

  • 原文:https://mp.weixin.qq.com/s/KC2DvUHaC0JTPCXPeZtwbg
  • 原始文件:raw/articles/微信文章3/跨OS GUI智能体基础设施白皮书——重新定义人机交互自动化|甲子光年智库_2.md
  • 发布方:庭宇科技 + 甲子光年 + 铸基计划

我的判断(高置信度)

这是 2026 年中国 GUI Agent 领域最系统的白皮书——庭宇科技是边缘智算 + GUI Agent 先行者。

关键洞察
1. "覆盖率 < 5%"是 API Agent 的致命缺陷——GUI Agent 是必然路径
2. "5% vs 95%"是 GUI Agent 的市场空间——绝大多数软件只能通过 UI 操作
3. 庭宇科技的"边缘智算 + GUI Agent"组合是独特的——竞品 Anthropic / OpenAI 没有边缘算力
4. "沙箱"是 GUI Agent 关键基础设施——Lybic 沙箱保障安全性

预测
- 2026 H2:GUI Agent 渗透率将达 30%+
- 2027:可能诞生"GUI Agent 操作系统"(参考 Android 模式)
- 2028:跨 OS GUI Agent 将成为"通用 Agent"的事实标准
- 对企业的建议
- 评估 Lybic / 庭宇科技作为 GUI Agent 供应商——边缘智算差异化
- 关注"GUI Agent + 业务系统"——而非纯 API Agent
- 对开发者的建议
- GUI Agent 技能是新增值——前端 / UI 测试 / 跨平台自动化
- 关注 Lybic 沙箱技术——学习 Agent 安全的最佳实践
- 对工具派的启示
- "覆盖率 < 5%"是 GUI Agent 创业者最大机会——避开了 API Agent 红海
- 边缘智算 + GUI Agent = 基础设施差异化——避免与 Anthropic 正面竞争