阿里:原生电脑操作智能体Qwen-CUA
标题Qwen-CUA: Native Computer Use for (almost) Everything来源arXiv, 2608.02352v1️文章简介研究问题如何构建仅通过截图观察和键鼠操作就能像人类一样通用且高效地操作各类软件的智能体主要贡献论文提出Qwen-CUA一个基于397B混合专家模型的纯视觉原生电脑使用智能体在八大基准测试中超越Qwen3.7并媲美顶尖闭源模型。重点思路最小化交互接口智能体仅接收屏幕截图作为输入输出键盘和鼠标事件不依赖DOM树、无障碍元数据或特定API确保跨软件通用的泛化能力。长程视觉上下文管理将活跃视觉历史扩展至20张截图采用分块折叠策略将旧截图替换为固定文本占位符既保留近期视觉证据又维持提示词前缀稳定以优化KV缓存复用。大规模可验证训练基础设施构建拥有近10万vCPU的云滚动集群支持数万个并发环境合成约4万个可验证任务涵盖日常及专业软件工作流并结合个性化人工轨迹进行监督。迭代式强化学习优化利用可执行结果奖励和长程轨迹切片技术采用软自适应策略优化SAPO算法通过迭代训练利用当前策略刷新监督数据混合比例并校准强化学习任务分布。分析总结性能全面领先在OSWorld-Verified上得分86.2显著优于Qwen3.7的73.3在OSWorld 2.0的二进制/部分完成率上也大幅提升扩展至万亿参数的Qwen-CUA-Max进一步提升了长程任务表现。安全性显著增强在RedTeamCUA基准测试中攻击成功率从Qwen3.7的36.6%降至16.4%同时保持了较高的良性任务成功率证明其具备更强的抗间接提示注入能力。效率与混合工具潜力分析显示性能提升并非源于更冗长的推理实验表明将原生交互与Bash命令行结合可显著缩短交互轨迹尽管当前路由策略仍有优化空间但证明了混合代理的高效前景。个人观点论文坚持“纯视觉原生键鼠”的最小化接口设计分块视觉折叠机制巧妙解决了长程交互中的上下文爆炸问题大规模可验证环境的构建则为解决GUI智能体训练数据稀缺和奖励稀疏难题提供了工程范式。

相关新闻

FDE系列10:需求的真相——为什么客户说的需求经常是错的?

FDE系列10:需求的真相——为什么客户说的需求经常是错的?

FDE系列10:需求的真相——为什么客户说的需求经常是错的?本文是《FDE工程师-从AI技术实现到业务落地》系列文章第10篇客户说"我要一个AI客服",你猜他真正需要的是什么?需求的三层结构 在FDE的工作中,客户说的…

2026/10/13 17:56:48 阅读更多 →
用iPhone拍Mac屏幕?连续互通相机一键搞定

用iPhone拍Mac屏幕?连续互通相机一键搞定

连续互通相机让Mac得以直接调用iPhone的高清摄像头。其中,调用iPhone摄像头拍摄Mac屏幕内容,解决了传统截图“视角单一”“无法捕捉屏幕实际显示效果”“高清细节缺失”等痛点,适用于教程制作、办公汇报、故障排查等多种场景。macOS Sequoia&…

2026/10/10 18:06:22 阅读更多 →
GitLab SSH密钥配置全攻略:从原理到实战,解决Permission denied

GitLab SSH密钥配置全攻略:从原理到实战,解决Permission denied

1. 项目概述:为什么GitLab SSH配置是开发者的“第一道门”如果你刚接触GitLab,或者从使用HTTP克隆代码切换到SSH,那么配置SSH密钥绝对是你需要跨过的第一道门槛。这不仅仅是输入几行命令那么简单,它背后关乎到你日常开发流程的顺畅…

2026/10/10 18:10:32 阅读更多 →

最新新闻

弗洛伊德解梦:噩梦为何也是潜意识的愿望满足?

弗洛伊德解梦:噩梦为何也是潜意识的愿望满足?

你有没有做过这种梦:明天就要交一份至关重要的方案,梦里你却发现自己连文件都找不到,或者更离谱,直接站在空无一人的考场里,试卷上的字全在飘。惊醒之后心跳半天才缓过来,第一反应往往是“这梦太丧了”。但…

2026/10/13 17:56:30 阅读更多 →
Codex 半年实战复盘:省 Token 技巧与高阶玩法全解析

Codex 半年实战复盘:省 Token 技巧与高阶玩法全解析

1. 半年迭代复盘:Codex 到底更新了哪些关键能力从去年底到现在,Codex 这个命令行编程智能体的更新节奏明显加快,几乎每隔两三周就会推一次有感知的变化。我自己的主力工作流已经全面切到 Codex 上,半年下来踩了不少坑,…

2026/10/13 17:56:30 阅读更多 →
t3code 深度解析:轻量级代码工具的设计思路与实操指南

t3code 深度解析:轻量级代码工具的设计思路与实操指南

1. 从“t3code”这个标题说起:它到底是什么,能解决什么问题第一次看到“t3code”这个标题,很多人会一头雾水。它不像“Python爬虫实战”那样直白,也不像“家庭咖啡烘焙指南”那样有明确场景。但恰恰是这种模糊性,给了我…

2026/10/13 17:56:30 阅读更多 →
Delphi老项目救星:KonopkaControls控件包安装与实战避坑指南

Delphi老项目救星:KonopkaControls控件包安装与实战避坑指南

简介:面向Delphi 13.1开发者的KonopkaControls 8.0.1控件包,是扩展VCL标准组件库的第三方界面控件集合,能有效补充原生控件在界面表现与交互能力上的不足,适合桌面应用开发及快速原型构建。压缩包共2000个文件,包含112…

2026/10/13 17:56:30 阅读更多 →
内容质量检查流水线:从错别字到失效链接的全面校验

内容质量检查流水线:从错别字到失效链接的全面校验

前阵子我在整理自己博客后台时,翻到一篇半年前阅读量还不错的旧文,发现里面躺着一个前期完全没注意到的错别字,还有一个早就失效的外部链接。那种感觉很难形容,就像精心布置的客厅里,墙角偏偏有一块没擦干净的污渍。也…

2026/10/13 17:56:30 阅读更多 →
Service层命名规范:从见名知意到代码可维护性

Service层命名规范:从见名知意到代码可维护性

接手一个业务系统,我最怕看到的不是复杂算法,而是那种一打开就让人头晕的 Service 实现类。2000 行起步,方法名字从 process 到 handle 再到 doSomething,翻遍整个类也猜不出某个方法是干嘛的。命名这种事,看起来不影响…

2026/10/13 17:55:28 阅读更多 →

日新闻

物联网系统集成避坑指南:从选型到验收的关键要点

物联网系统集成避坑指南:从选型到验收的关键要点

做了这么多年物联网系统集成的项目,我最大的感受是,大部分坑不是出在技术前沿,而是出在一些看起来很平常的地方。设备选了便宜的、协议没问清楚、现场没摸透、验收标准写得含糊——这些细枝末节,最后都会变成延期、超支和扯皮的大…

2026/10/13 0:00:57 阅读更多 →
ESP32舵机控制全攻略:从PWM原理到高级玩法与常见故障排查

ESP32舵机控制全攻略:从PWM原理到高级玩法与常见故障排查

如果你玩ESP32有一阵子了,很难不碰到舵机控制这道坎。做智能小车要转方向,做机械臂要抬关节,做云台要偏航俯仰,背后都是同一个东西在干活:舵机。而我见过太多人卡在“代码能编译、舵机就是不听话”这个阶段&#xff0c…

2026/10/13 0:00:57 阅读更多 →
CAN总线原理与STM32实战:抗干扰、仲裁、错误处理全解析

CAN总线原理与STM32实战:抗干扰、仲裁、错误处理全解析

1. 为什么CAN总线至今仍是工业现场的“硬通货”?——从汽车底盘到智能温室的真实需求你有没有拆过一辆老款燃油车的中控台?或者调试过某高校实验室里那台跑着Modbus协议却频频丢帧的PLC控制柜?又或者,在某个农业物联网项目里&…

2026/10/13 0:00:57 阅读更多 →

周新闻

流感时间序列预测实战:ARIMA/LSTM全流程拆解与避坑指南

流感时间序列预测实战:ARIMA/LSTM全流程拆解与避坑指南

简介:基于 ARIMA、LSTM、Transformer 等模型的流感时间序列预测 Python 源码,面向计算机相关专业课程设计与期末大作业学生,以及项目实战学习者。内容覆盖预处理、平稳性检验、定阶、残差分析、多模型对比预测的完整时序建模流程,…

2026/10/13 2:54:56 阅读更多 →
影刀RPA新手教程:键盘模拟输入实战——输入文本与模拟按键的区别

影刀RPA新手教程:键盘模拟输入实战——输入文本与模拟按键的区别

影刀RPA新手教程:键盘模拟输入实战——输入文本与模拟按键的区别 做影刀RPA自动化,十个新手有八个栽在"往输入框里填东西"这件事上:要么填不进去,要么填了一半,要么直接把原来内容追加在后面。这背后的根因&…

2026/10/13 16:22:04 阅读更多 →
影刀RPA新手教程:阅文起点小说数据采集实战——书籍信息与章节内容

影刀RPA新手教程:阅文起点小说数据采集实战——书籍信息与章节内容

影刀RPA新手教程:阅文起点小说数据采集实战——书籍信息与章节内容 1. 认识影刀:什么场景该用RPA采小说数据 起点中文网的页面结构相对稳定——分类榜单、书籍详情、章节内容三块独立页面,跳转链路清晰。这种场景非常适合影刀自动化&#x…

2026/10/13 1:58:08 阅读更多 →

月新闻

我发现了一个新思路:用 Remotion + Claude Code 像写代码一样自动化生成短视频

我发现了一个新思路:用 Remotion + Claude Code 像写代码一样自动化生成短视频

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/12 21:05:09 阅读更多 →
Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式:TaoToken 统一 Key 配置与验证

Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式:TaoToken 统一 Key 配置与验证

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/13 14:57:39 阅读更多 →
黑夜航拍船只数据集训练YOLOV5模型全流程解析

黑夜航拍船只数据集训练YOLOV5模型全流程解析

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/12 18:11:17 阅读更多 →