MM-OPERA: Benchmarking Open-ended Association Reasoning for Large Vision-Language Models
文章核心总结本文提出MM-OPERA基准,针对大型视觉语言模型(LVLMs)的开放式关联推理能力进行评估,弥补现有闭卷任务无法捕捉复杂关联推理的缺陷。基准包含11,497个实例,涵盖远程项目关联(RIA)和上下文关联(ICA)两大任务,结合认知心理学原理,通过LLM-as-a-Judge策略实现多维度评估。实验表明,当前顶尖LVLMs在关联推理上仍显著落后于人类,尤其在发散思维、跨模态泛化和复杂推理路径上存在明显不足。核心创新点开放式关联推理基准设计:突破传统闭卷任务限制,采用无预定义答案的开放式任务,覆盖13个关联维度、15种语言和22个主题领域,全面评估收敛思维与发散思维的结合。双任务架构:RIA任务要求发现无关概念的深层关联,ICA任务侧重模式抽象与迁移,模拟人类关联推理的核心过程。精细化评估体系:提出常规评分与过程奖励评分(PR-Judge)结合的LLM-as-a-Judge策略,不仅评估结果质量,还通过推理路径拆解(如跳数、合理性、独特性)分析推理过程。多维度鲁棒性验证:通过图像替换、跨模态替换、输入顺序敏感测试,验证基准对表面特征干扰的抵抗力,确保评估的可靠性。翻译部分(Markdown格式)Abstract大

相关新闻

开发者必备:使用OptiQ在Mac上微调chartreader-0.8B-OptiQ-4bit的实战技巧 [特殊字符]

开发者必备:使用OptiQ在Mac上微调chartreader-0.8B-OptiQ-4bit的实战技巧 [特殊字符]

开发者必备:使用OptiQ在Mac上微调chartreader-0.8B-OptiQ-4bit的实战技巧 🚀 【免费下载链接】chartreader-0.8B-OptiQ-4bit 项目地址: https://ai.gitcode.com/hf_mirrors/mlx-community/chartreader-0.8B-OptiQ-4bit 想要在Mac上高效地微调图表…

2026/7/23 23:39:30 阅读更多 →
Dots-TTS-MLX-INT8性能优化指南:让语音生成速度提升50%的秘诀

Dots-TTS-MLX-INT8性能优化指南:让语音生成速度提升50%的秘诀

Dots-TTS-MLX-INT8性能优化指南:让语音生成速度提升50%的秘诀 【免费下载链接】dots-tts-mlx-int8 项目地址: https://ai.gitcode.com/hf_mirrors/mlx-community/dots-tts-mlx-int8 Dots-TTS-MLX-INT8是一款基于MLX框架优化的高效语音生成模型,通…

2026/7/21 15:26:14 阅读更多 →
AMD Qwen3.5-9B-w4a16-tao-symgroup-torchao-v0.17.0与vLLM集成:高效推理的最佳实践

AMD Qwen3.5-9B-w4a16-tao-symgroup-torchao-v0.17.0与vLLM集成:高效推理的最佳实践

AMD Qwen3.5-9B-w4a16-tao-symgroup-torchao-v0.17.0与vLLM集成:高效推理的最佳实践 【免费下载链接】Qwen3.5-9B-w4a16-tao-symgroup-torchao-v0.17.0 项目地址: https://ai.gitcode.com/hf_mirrors/amd/Qwen3.5-9B-w4a16-tao-symgroup-torchao-v0.17.0 AM…

2026/7/21 19:25:06 阅读更多 →

最新新闻

职场英语学习计划Day018

职场英语学习计划Day018

🌟计划1:📅学习时间:2026.7.19 周日内容:视频17主题:English at Work Episode 17: Lemon-sized luxury boxes How to place an order消耗时长:学新复习 共 19 min▶ It’s stopped now anyway. …

2026/7/23 23:40:08 阅读更多 →
支付系统框架学习实战:架构思维与踩坑心得

支付系统框架学习实战:架构思维与踩坑心得

支付系统设计实战:架构思维与踩坑心得从零接入支付 SDK 到上线稳定运行,聊聊那些比写代码更重要的设计决策。前言 最近独立负责了一个后端支付系统的 SDK 集成工作。回头看整个过程,真正花时间的不是写代码——HTTP 调一下、回调接一下、签名…

2026/7/23 23:40:08 阅读更多 →
FPGA时钟约束四层架构详解

FPGA时钟约束四层架构详解

时钟约束的四层架构构成了FPGA原型验证中时序收敛的基础框架,其具体内容如下表所示: 层级名称主要作用关键约束命令示例应用场景与说明第一层时钟定义 (物理时钟)定义从芯片外部引脚或内部源(如晶振、时钟发生器)输入的主时钟信号…

2026/7/23 23:40:07 阅读更多 →
工业 IoT 与边缘计算场景下“声光+TTS 智能语音”现场告警终端的架构设计与实现

工业 IoT 与边缘计算场景下“声光+TTS 智能语音”现场告警终端的架构设计与实现

摘要:在工业 4.0、智能制造与边缘计算(Edge Computing)快速发展的背景下,OT(运营技术)与 IT(信息技术)的融合日益紧密。然而,工业现场(如 PLC 控制柜、SMT 产…

2026/7/23 23:39:07 阅读更多 →
剪映作品复盘表怎么做?零基础先检查字幕、封面和节奏

剪映作品复盘表怎么做?零基础先检查字幕、封面和节奏

短视频剪辑不是只会剪掉多余片段就够了。对零基础来说,更重要的是建立一张作品复盘表:每做完一个作品,都用同一套标准检查字幕、封面、节奏、音频和导出。 这类内容放在 CSDN 上,不适合写“怎么快速涨粉”,更适合写成…

2026/7/23 23:39:07 阅读更多 →
Python中str、list、tuple、dict、set 五大内置数据结构详解

Python中str、list、tuple、dict、set 五大内置数据结构详解

初学 Python,最先要攻克的就是内置数据结构!字符串、列表、元组、字典、集合贯穿我们几乎所有代码。很多人只会基础增删改查,遇到场景选型就一脸迷茫:什么时候用列表?什么时候选元组?集合去重原理是什么&am…

2026/7/23 23:39:07 阅读更多 →

日新闻

从单点好评到指数级传播:AI副业主理人必须掌握的4层口碑渗透模型(含ROI测算表)

从单点好评到指数级传播:AI副业主理人必须掌握的4层口碑渗透模型(含ROI测算表)

更多请点击: https://intelliparadigm.com 第一章:从单点好评到指数级传播:AI副业主理人必须掌握的4层口碑渗透模型(含ROI测算表) 当AI副业主理人不再仅满足于单次服务交付,而是主动构建可复用、可裂变、可…

2026/7/23 0:00:25 阅读更多 →
AI写作开头钩子设计:为什么你的AI文案完读率不足18%?——基于2,346篇A/B测试报告的归因分析

AI写作开头钩子设计:为什么你的AI文案完读率不足18%?——基于2,346篇A/B测试报告的归因分析

更多请点击: https://codechina.net 第一章:AI写作开头钩子设计:为什么你的AI文案完读率不足18%?——基于2,346篇A/B测试报告的归因分析 在对2,346篇跨行业AI生成文案的A/B测试数据进行聚类分析后,我们发现&#xff1…

2026/7/23 0:01:26 阅读更多 →
Chitchatter完整指南:免费开源的终极点对点安全聊天工具

Chitchatter完整指南:免费开源的终极点对点安全聊天工具

Chitchatter完整指南:免费开源的终极点对点安全聊天工具 【免费下载链接】chitchatter Secure peer-to-peer chat that is serverless, decentralized, and ephemeral 项目地址: https://gitcode.com/gh_mirrors/ch/chitchatter Chitchatter是一款革命性的安…

2026/7/23 0:01:26 阅读更多 →

周新闻

Go语言静态资源打包方案对比与实践指南

Go语言静态资源打包方案对比与实践指南

1. 项目背景与核心需求在Go语言开发中,我们经常需要处理静态资源文件的打包问题。无论是Web应用的模板文件、前端资源,还是配置文件、证书等,都需要随程序一起分发。传统做法是将这些文件与编译后的二进制文件放在同一目录下,但这…

2026/7/22 8:58:19 阅读更多 →
Go语言实现高性能LDAP认证服务的架构与实践

Go语言实现高性能LDAP认证服务的架构与实践

1. 项目背景与核心价值LDAP(轻量级目录访问协议)作为企业级身份认证的黄金标准,已经服务了超过80%的财富500强公司。我在金融科技领域实施统一认证体系时,发现传统Java方案存在启动慢、内存占用高等痛点。而Go语言凭借其协程并发模…

2026/7/22 19:43:43 阅读更多 →
【AI面试官实战指南】:用ChatGPT模拟10类高频技术岗面试,3天提升应答精准度92%

【AI面试官实战指南】:用ChatGPT模拟10类高频技术岗面试,3天提升应答精准度92%

更多请点击: https://intelliparadigm.com 第一章:AI面试官实战指南的核心价值与适用场景 AI面试官并非替代人类HR的“黑箱工具”,而是以可解释、可审计、可迭代的方式,赋能招聘全链路的关键基础设施。其核心价值在于将主观经验沉…

2026/7/23 17:49:47 阅读更多 →

月新闻