MM-OPERA: Benchmarking Open-ended Association Reasoning for Large Vision-Language Models
文章核心总结本文提出MM-OPERA基准,针对大型视觉语言模型(LVLMs)的开放式关联推理能力进行评估,弥补现有闭卷任务无法捕捉复杂关联推理的缺陷。基准包含11,497个实例,涵盖远程项目关联(RIA)和上下文关联(ICA)两大任务,结合认知心理学原理,通过LLM-as-a-Judge策略实现多维度评估。实验表明,当前顶尖LVLMs在关联推理上仍显著落后于人类,尤其在发散思维、跨模态泛化和复杂推理路径上存在明显不足。核心创新点开放式关联推理基准设计:突破传统闭卷任务限制,采用无预定义答案的开放式任务,覆盖13个关联维度、15种语言和22个主题领域,全面评估收敛思维与发散思维的结合。双任务架构:RIA任务要求发现无关概念的深层关联,ICA任务侧重模式抽象与迁移,模拟人类关联推理的核心过程。精细化评估体系:提出常规评分与过程奖励评分(PR-Judge)结合的LLM-as-a-Judge策略,不仅评估结果质量,还通过推理路径拆解(如跳数、合理性、独特性)分析推理过程。多维度鲁棒性验证:通过图像替换、跨模态替换、输入顺序敏感测试,验证基准对表面特征干扰的抵抗力,确保评估的可靠性。翻译部分(Markdown格式)Abstract大

相关新闻

开发者必备:使用OptiQ在Mac上微调chartreader-0.8B-OptiQ-4bit的实战技巧 [特殊字符]

开发者必备:使用OptiQ在Mac上微调chartreader-0.8B-OptiQ-4bit的实战技巧 [特殊字符]

开发者必备:使用OptiQ在Mac上微调chartreader-0.8B-OptiQ-4bit的实战技巧 🚀 【免费下载链接】chartreader-0.8B-OptiQ-4bit 项目地址: https://ai.gitcode.com/hf_mirrors/mlx-community/chartreader-0.8B-OptiQ-4bit 想要在Mac上高效地微调图表…

2026/9/19 7:35:15 阅读更多 →
Dots-TTS-MLX-INT8性能优化指南:让语音生成速度提升50%的秘诀

Dots-TTS-MLX-INT8性能优化指南:让语音生成速度提升50%的秘诀

Dots-TTS-MLX-INT8性能优化指南:让语音生成速度提升50%的秘诀 【免费下载链接】dots-tts-mlx-int8 项目地址: https://ai.gitcode.com/hf_mirrors/mlx-community/dots-tts-mlx-int8 Dots-TTS-MLX-INT8是一款基于MLX框架优化的高效语音生成模型,通…

2026/9/18 4:18:33 阅读更多 →
AMD Qwen3.5-9B-w4a16-tao-symgroup-torchao-v0.17.0与vLLM集成:高效推理的最佳实践

AMD Qwen3.5-9B-w4a16-tao-symgroup-torchao-v0.17.0与vLLM集成:高效推理的最佳实践

AMD Qwen3.5-9B-w4a16-tao-symgroup-torchao-v0.17.0与vLLM集成:高效推理的最佳实践 【免费下载链接】Qwen3.5-9B-w4a16-tao-symgroup-torchao-v0.17.0 项目地址: https://ai.gitcode.com/hf_mirrors/amd/Qwen3.5-9B-w4a16-tao-symgroup-torchao-v0.17.0 AM…

2026/9/19 14:46:44 阅读更多 →

最新新闻

wordpress缩略图加边框的5种实现方案与从零搭建避坑指南

wordpress缩略图加边框的5种实现方案与从零搭建避坑指南

wordpress缩略图加边框的5种实现方案与从零搭建避坑指南 做网站最怕什么?不是代码写不出来,而是明明功能都实现了,上线后效果却和预期差之千里,甚至因为一个小小的图片边框问题,导致整个页面的视觉节奏全乱了。很多刚入行的朋友,或者负责运营的朋友,在面对【wordpress缩略图加边框】这个看似简单…

2026/9/19 18:15:37 阅读更多 →
高速公路自动驾驶超车控制:四维可行域建模与STC轨迹生成

高速公路自动驾驶超车控制:四维可行域建模与STC轨迹生成

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/9/19 18:15:12 阅读更多 →
WiFi温湿度传感器接入MQTT:从配置到实战的完整指南

WiFi温湿度传感器接入MQTT:从配置到实战的完整指南

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/9/19 18:15:12 阅读更多 →
PyPTO 性能调优环境变量 PYPTO_PROF_PMU_EVENT_TYPE 详解:AI Core PMU 事件组选择与采集流程

PyPTO 性能调优环境变量 PYPTO_PROF_PMU_EVENT_TYPE 详解:AI Core PMU 事件组选择与采集流程

PyPTO 性能调优环境变量 PYPTO_PROF_PMU_EVENT_TYPE 详解:AI Core PMU 事件组选择与采集流程 【免费下载链接】pypto PyPTO(发音: pai p-t-o):Parallel Tensor/Tile Operation编程范式。 项目地址: https://gitcode.com/cann/py…

2026/9/19 18:15:12 阅读更多 →
EMBOSS安装与实战:Linux下序列分析工具集的完整指南

EMBOSS安装与实战:Linux下序列分析工具集的完整指南

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/9/19 18:15:12 阅读更多 →
Visio下载安装全指南:版本选择、激活激活与高频问题排查

Visio下载安装全指南:版本选择、激活激活与高频问题排查

Visio这个软件,很多人是到了要画流程图、画网络拓扑、画UML类图的时候才想起来去下载安装。但真到下载这一步,遇到的问题往往比用起来还多:搜索引擎一翻全是下载站,点进去全是高速下载器;装到一半报错;装完…

2026/9/19 18:15:12 阅读更多 →

日新闻

BP神经网络时序预测:滑窗长度与多窗口平均策略

BP神经网络时序预测:滑窗长度与多窗口平均策略

简介:面向机器学习、深度学习与数据建模学习者的一份完整研究文献,聚焦BP神经网络在农业产量预测中的应用。文档以1980—2018年全国棉花产量为样本,系统讲解数据归一化处理、激活函数原理、多层神经网络结构搭建及训练流程,展示敏…

2026/9/19 0:00:30 阅读更多 →
Transformer训练实时监控实战:基于MindSpore的损失曲线可视化方案

Transformer训练实时监控实战:基于MindSpore的损失曲线可视化方案

上个月调一个Deformable DETR模型,在单卡上要跑将近两天。第二天早上我下意识打开终端翻日志,发现loss从凌晨两点就开始往上爬,一路从0.8涨到1.35,整整六个小时没人发现。那六个小时的训练不仅白跑,还霸占着卡——等于…

2026/9/19 0:00:30 阅读更多 →
OpenCloud 中的 Go 类型安全转换库 spf13/cast:从零值回退到泛型 API 的完整实战指南

OpenCloud 中的 Go 类型安全转换库 spf13/cast:从零值回退到泛型 API 的完整实战指南

OpenCloud 中的 Go 类型安全转换库 spf13/cast:从零值回退到泛型 API 的完整实战指南 【免费下载链接】opencloud 🌤️ OpenCloud is the open source platform for file management, sharing and collaboration. Simple and sovereign. 项目地址: htt…

2026/9/19 0:00:30 阅读更多 →

周新闻

AI SDK Harness 依赖更新指南:掌握 harness 包 SDK 依赖的升级、桥接同步与一致性校验

AI SDK Harness 依赖更新指南:掌握 harness 包 SDK 依赖的升级、桥接同步与一致性校验

AI SDK Harness 依赖更新指南:掌握 harness 包 SDK 依赖的升级、桥接同步与一致性校验 【免费下载链接】ai The AI Toolkit for TypeScript. From the creators of Next.js, the AI SDK is a free open-source library for building AI-powered applications and ag…

2026/9/19 3:59:36 阅读更多 →
Refine v5 Ant Design NumberField 组件实战:基于 Intl 的本地化数字格式化

Refine v5 Ant Design NumberField 组件实战:基于 Intl 的本地化数字格式化

Refine v5 Ant Design NumberField 组件实战:基于 Intl 的本地化数字格式化 【免费下载链接】refine A React Framework for building internal tools, admin panels, dashboards & B2B apps with unmatched flexibility. 项目地址: https://gitcode.com/GitH…

2026/9/19 3:53:08 阅读更多 →
Flutter应用改名全指南:从Android到iOS的配置与工具实践

Flutter应用改名全指南:从Android到iOS的配置与工具实践

刚接一个外包项目时,甲方要求把工程里临时用的应用名改成正式产品名。我本来觉得“改名”这种小事,打开配置文件改一行不就完了?结果真动手才发现,Flutter项目里“应用名称”根本不是一处配置,而是一整套散落在 Androi…

2026/9/19 4:02:43 阅读更多 →

月新闻

持续集成 流水线自动化与 声明式交付 实践:原型怎样变成可用功能

持续集成 流水线自动化与 声明式交付 实践:原型怎样变成可用功能

持续集成 流水线自动化与 声明式交付 实践:原型怎样变成可用功能分类:[AI/大模型]细分主题:AI 增强型 CI/CD 流水线自动化与 GitOps 实践:Agent 工作流、工具调用与任务拆解:从原型到生产的验收清单很多团队在尝试用大…

2026/9/16 22:31:27 阅读更多 →
容器编排 生产环境运维与排障实战:复盘记录怎样真正派上用场

容器编排 生产环境运维与排障实战:复盘记录怎样真正派上用场

容器编排 生产环境运维与排障实战:复盘记录怎样真正派上用场分类:[工程技术]细分主题:Kubernetes 生产环境运维与排障实战:可复制的项目复盘模板与决策记录大部分团队的事故复盘报告,最后都变成了躺在 Confluence 或钉…

2026/9/19 17:50:38 阅读更多 →
容器 容器化技术与镜像安全管理:核心链路应该先拆哪一步

容器 容器化技术与镜像安全管理:核心链路应该先拆哪一步

容器 容器化技术与镜像安全管理:核心链路应该先拆哪一步分类:[工程技术]细分主题:Docker 容器化技术与镜像安全管理:核心链路的逐步实现与关键代码取舍面对一个积累了五六年历史包袱的单体架构应用(包含 Web 接口、后台…

2026/9/16 22:32:59 阅读更多 →