游乐游手机版
首页/科技数码/文章详情

MAI-UI:通义实验室开源智能体基座模型的图形交互界面

时间:2025-12-29 22:03
阿里通义实验室多模态交互团队正式开源全系列 GUI 智能体基础模型——MAI-UI,首次在统一架构中原生融合用户界面交互、MCP 工具调用与端云协同三大核心能力,依托自主演进的数据

通义实验室多模态交互团队正式开源全系列 GUI 智能体基座模型——MAI-UI,首次在统一架构中原生融合用户界面交互、MCP 工具调用与端云协同三大核心能力,依托自主演进的数据构建管线及大规模在线强化学习技术实现深度协同优化(当前已开放 2B 与 8B 两个规模版本)。

MAI-UI 的设计目标是打造一款真正理解并能执行复杂自然语言指令、在图形用户界面(GUI)环境中自主完成端到端任务的智能代理。它聚焦攻克现实世界中的关键难题:跨应用无缝协作、模糊/不完整语义解析、动态人机交互反馈,以及多阶段长流程任务的精准编排与容错执行。

通义实验室开源 GUI 智能体基座模型:MAI-UI

相较于传统 AndroidWorld 测试基准,全新 MobileWorld 评测体系具备三大显著升级:难度更高、场景更实、操作更贴近真实手机使用习惯:

✅ 平均任务步长达 27.8 步(约为 AndroidWorld 的两倍)
✅ 超 60% 的任务需跨越多个 App 协同完成(覆盖电商比价、出行订票、日程管理等复合型场景)
✅ 首次设立两类前沿挑战任务:

  • 交互式模糊指令任务:用户输入存在歧义或信息缺失时,模型需主动发起澄清提问,杜绝无依据臆测与幻觉输出;
  • MCP-GUI 融合任务:同步调度外部工具接口(如 GitHub、Arxiv 等)与本地 GUI 操作,推动移动端智能体迈向工业级生产力水平。

目前主流 SOTA 方法整体成功率仅为 51.7%,而端到端黑盒模型表现更弱,最高仅达 20.9%;面对 MobileWorld 新增的高阶挑战任务,多数现有 Agent 的准确率已趋近于零!

通义实验室开源 GUI 智能体基座模型:MAI-UI

相关资源直达链接:

来源:https://www.php.cn/faq/1906853.html?uid=1246273
上一篇卡帕西谈程序员焦虑:深度剖析AI专家如何高效应对行业竞争 下一篇GLM-4登顶全球开源模型榜,权威Artificial Analysis报告揭示
本站内容用于信息整理与展示,如有侵权或内容问题请及时联系处理。

相关推荐

补充同频道和同主题内容,方便继续浏览更多相关内容。

同类最新

继续查看同栏目最近更新的文章。

更多
OpenClaw手机App上线,结果翻车了
科技数码 · 2026-07-01

OpenClaw手机App上线,结果翻车了

OpenClaw 官方宣布,已正式推出 iOS 和 Android 原生移动 App,用户如今可以在手机上使用这款主打“能真正帮你做事”的个人 AI 助手。官方在 X 上给出的定位也很直接:把 Agent 放进口袋里,让用户可以在移动端处理频道消息、任务和回复。从功能上看,OpenClaw 移动端并

优必选CEO周剑:家庭机器人生态核心投入过半精力
科技数码 · 2026-07-01

优必选CEO周剑:家庭机器人生态核心投入过半精力

先说几个核心判断:优必选正在布局一盘长远战略。创始人兼CEO周剑在近期一场媒体沟通会上,直接亮出了公司未来的发展路线——工业、商用、家庭陪伴机器人三条业务主赛道并行推进,现阶段每条线各占约一半精力。一边是已经能够稳定创造收入的工业场景,另一边则是他眼中“最具想象力与未来空间”的家庭陪伴领域。工业人形

CPO/NPO/OIO开启封装级光连接价值空间,技术路线尚未收敛
科技数码 · 2026-07-01

CPO/NPO/OIO开启封装级光连接价值空间,技术路线尚未收敛

6月30日,申银万国在光连接系列研报中重点指出,MPO光连接器领域的投资机会值得高度关注。通俗来说,随着AI算力集群持续扩张,光互联升级带来的连锁效应——数据中心光纤通道数量、前面板端口密度、机柜内光纤管理复杂度——均在同步攀升。光连接器的角色早已超越传统的低价值标准件,如今它直接决定着链路插损、可

龙岗AR实景剧本游内测体验短板有效破解之道
科技数码 · 2026-07-01

龙岗AR实景剧本游内测体验短板有效破解之道

在今年龙岗区第二届人工智能与机器人发展大会上,区级部门一次性推出了7个AI“龙搭子”。其中,名为“龙导游”的成果成为文商旅融合领域的核心亮点。据南都N视频记者了解,依托“龙导游”打造的全区全域AR实景剧本游“龙岗大陆”,已在今年五一假期发布了内测版本。经过一个月市场验证后,该项目正式启动面向全社会的

南下资金6月30日净买入中芯国际与建滔积层板
科技数码 · 2026-07-01

南下资金6月30日净买入中芯国际与建滔积层板

6月30日,南下资金持续大举买入港股,单日净流入金额高达58 95亿港元。接下来,我们直接盘点哪些个股获得资金青睐、哪些遭到减持: 净买入方面,中芯国际领跑全场,单日吸金19 33亿港元;建滔积层板紧随其后,净买入10 59亿港元;腾讯控股获得7 65亿港元净流入;智谱(02513 HK)也有6 5