The Art of Scaling Test-Time Compute for Large Language Models
一、文章主要内容总结本文聚焦大语言模型(LLMs)的测试时缩放(TTS)技术,旨在解决现有研究中缺乏统一条件下TTS策略系统对比、模型类型与问题难度对性能影响不明确的问题。通过对8个开源LLM(参数规模7B-235B)在4个推理数据集上生成的超300亿tokens进行大规模研究,得出三大核心发现:无单一TTS策略能全局最优,不同策略的效果依赖模型类型、问题难度和计算预算;推理模型按轨迹质量模式可分为短视域(如R1、DAPO-32B)和长视域(如Qwen3-32B、GPT-OSS-120B)两类,短视域模型偏好简洁推理轨迹,长视域模型在难题上更受益于长轨迹;对特定模型类型,最优TTS性能随计算预算单调递增。基于这些发现,作者提出实用选择指南:低计算预算时短视域和非推理模型优先FFS-k@N(k=1,N尽可能大),长视域模型采用简单解码;高计算预算时所有模型均优先MV@N(N尽可能大)。同时验证了beam search在推理任务中存在逆缩放效应,LFS策略始终不如MV策略最优,DAPO算法与GRPO算法诱导的长度偏差程度相近。二、文章创新点首次开展大规模TTS系统研究:覆盖多模型、多数据集、多策略,生成超300亿tokens,填补了不同TTS策略在统一条件下对比的空白;提出模型视域分类框架:基于后训练算法差异(如GRPO/GSPO)将推理模型分为短视域和长视域,揭示了不同模型的轨迹长度-质量关联规律;发现关键性能规律:明确beam search的逆缩放效应、LFS策略的次优性、计算预算与最

相关新闻

PPTBench: Towards Holistic Evaluation of Large Language Models for PowerPoint Layout and Design U...

PPTBench: Towards Holistic Evaluation of Large Language Models for PowerPoint Layout and Design U...

PPTBench论文核心总结与关键部分翻译 一、文章主要内容 PPTBench是一个针对大型语言模型(MLLMs)在PowerPoint相关任务中布局理解与设计推理能力的综合多模态基准测试集。其核心内容围绕以下维度展开: 1. 基准测试集设计 数据基础:基于958个源自政府档案的专业PPT文件,构…

2026/8/23 18:14:39 阅读更多 →
SAP MIGO物料凭证消息与输出配置详解:从NACE到条件技术的实战指南

SAP MIGO物料凭证消息与输出配置详解:从NACE到条件技术的实战指南

1. 项目背景与核心诉求:为什么MIGO的MESSAGE OUTPUT配置如此重要?如果你在SAP MM模块里泡过一段时间,肯定对MIGO这个事务代码不陌生。它是物料管理的核心操作入口,收货、发货、转储、退货,几乎所有的物料移动都得经过它…

2026/8/23 18:14:39 阅读更多 →
计算机舆情数据项目推荐:基于Python微博舆情数据爬虫可视化分析系统(NLP情感分析+爬虫+机器学习)

计算机舆情数据项目推荐:基于Python微博舆情数据爬虫可视化分析系统(NLP情感分析+爬虫+机器学习)

文章目录计算机舆情数据项目推荐:基于Python微博舆情数据爬虫可视化分析系统(NLP情感分析爬虫机器学习)一、项目概述全套资料获取二、微博热词统计析三、微博文章分析四、微博评论分析五、微博舆情分析六、系统设计系统数据爬虫过程机器学习算法情感分析功能实现数据…

2026/8/23 18:13:39 阅读更多 →

最新新闻

深入解析SystemVerilog调度机制:芯片验证中的时序交通规则

深入解析SystemVerilog调度机制:芯片验证中的时序交通规则

1. 项目概述:为什么SV的调度机制是芯片验证的“交通规则”如果你刚接触SystemVerilog,尤其是从Verilog转过来做验证,可能会觉得仿真器有时候的行为有点“玄学”。明明代码逻辑看起来没问题,但仿真结果就是和预期对不上&#xff0c…

2026/8/23 18:53:58 阅读更多 →
SpringBoot+Vue实习生管理系统全栈开发实践

SpringBoot+Vue实习生管理系统全栈开发实践

1. 项目概述:实习生管理系统的技术架构与价值 这个基于SpringBootVue的实习生管理系统,本质上是一个面向高校计算机专业毕业设计的全栈开发解决方案。我在指导过37个类似毕设项目后发现,实习生管理是学生最容易上手的选题方向之一——它既有明…

2026/8/23 18:53:58 阅读更多 →
Linux 系统 IO 知识点总结

Linux 系统 IO 知识点总结

一、文件 IO 基础1. 文件 IO 概念IO:I (Input 输入 / 读,从文件拿数据);O (Output 输出 / 写,把数据存入文件)。文件是存储介质上的数据集合,文件 IO 就是操作文件的手段。应用程序运行在用户空间,文件存于…

2026/8/23 18:53:58 阅读更多 →
Edge浏览器深度清理优化指南:从界面净化到进程管控

Edge浏览器深度清理优化指南:从界面净化到进程管控

1. 项目概述:为什么我们需要一个“干净”的Edge?Edge浏览器,作为Windows系统的“原住民”,凭借其与系统的深度集成和日益提升的性能,已经成为了许多用户的主力选择。但用久了你会发现,它似乎变得越来越“臃…

2026/8/23 18:53:58 阅读更多 →
dev-sidecar

dev-sidecar

1. 安装2. 安装证书

2026/8/23 18:53:58 阅读更多 →
基于LoRA高效微调Whisper,实现方言语音识别精准化

基于LoRA高效微调Whisper,实现方言语音识别精准化

1. 方言识别为什么需要微调,以及Whisper的默认能力边界如果你手头有大量方言语音数据,想让AI模型准确识别,直接使用开箱即用的Whisper模型大概率会失望。Whisper在通用普通话和主流英语上表现惊艳,但对于潮州话、闽南语、粤语等方…

2026/8/23 18:52:58 阅读更多 →

日新闻

[光学原理与应用-521]:对光的错误理解与纠偏

[光学原理与应用-521]:对光的错误理解与纠偏

首先光是一种能量的载体和形态,宏观上观察到的光是由无数个微观的光量子组成的,每个光子在产生的瞬间,其在真空的空间中以确定不变的速度沿着一个初始的方向一直向前,在微观层面,每个光量子的运动轨迹是以波函数所展现…

2026/8/23 0:00:50 阅读更多 →
SIP通话转接原理与REFER方法实战解析

SIP通话转接原理与REFER方法实战解析

1. 通话转接不是“挂断再拨号”,而是SIP会话的动态重定向你有没有遇到过这样的场景:客服坐席A正在和客户通电话,突然需要把这通对话无缝转给专家坐席B,客户完全感知不到中间的断连——既没听到忙音,也没被要求重新拨号…

2026/8/23 0:00:50 阅读更多 →
Kolla-ansible单节点OpenStack部署实战:从环境准备到排坑指南

Kolla-ansible单节点OpenStack部署实战:从环境准备到排坑指南

1. 为什么选择Kolla-ansible来部署单节点OpenStack?如果你正在寻找一种能把OpenStack从“概念”快速变成“可用的实验环境”的方法,那么Kolla-ansible几乎是当前最主流、最省心的选择。我见过太多人卡在手动编译依赖、配置服务、处理版本冲突的泥潭里&am…

2026/8/23 0:00:50 阅读更多 →

周新闻

[光学原理与应用-521]:对光的错误理解与纠偏

[光学原理与应用-521]:对光的错误理解与纠偏

首先光是一种能量的载体和形态,宏观上观察到的光是由无数个微观的光量子组成的,每个光子在产生的瞬间,其在真空的空间中以确定不变的速度沿着一个初始的方向一直向前,在微观层面,每个光量子的运动轨迹是以波函数所展现…

2026/8/23 0:00:50 阅读更多 →
SIP通话转接原理与REFER方法实战解析

SIP通话转接原理与REFER方法实战解析

1. 通话转接不是“挂断再拨号”,而是SIP会话的动态重定向你有没有遇到过这样的场景:客服坐席A正在和客户通电话,突然需要把这通对话无缝转给专家坐席B,客户完全感知不到中间的断连——既没听到忙音,也没被要求重新拨号…

2026/8/23 0:00:50 阅读更多 →
Kolla-ansible单节点OpenStack部署实战:从环境准备到排坑指南

Kolla-ansible单节点OpenStack部署实战:从环境准备到排坑指南

1. 为什么选择Kolla-ansible来部署单节点OpenStack?如果你正在寻找一种能把OpenStack从“概念”快速变成“可用的实验环境”的方法,那么Kolla-ansible几乎是当前最主流、最省心的选择。我见过太多人卡在手动编译依赖、配置服务、处理版本冲突的泥潭里&am…

2026/8/23 0:00:50 阅读更多 →

月新闻

免费解锁百度网盘SVIP加速:macOS用户必备的下载提速终极指南

免费解锁百度网盘SVIP加速:macOS用户必备的下载提速终极指南

免费解锁百度网盘SVIP加速:macOS用户必备的下载提速终极指南 【免费下载链接】BaiduNetdiskPlugin-macOS For macOS.百度网盘 破解SVIP、下载速度限制~ 项目地址: https://gitcode.com/gh_mirrors/ba/BaiduNetdiskPlugin-macOS 还在为百度网盘macOS版的龟速下…

2026/8/23 18:47:06 阅读更多 →
终极ncmdump指南:3分钟实现网易云NCM音乐解密与格式转换

终极ncmdump指南:3分钟实现网易云NCM音乐解密与格式转换

终极ncmdump指南:3分钟实现网易云NCM音乐解密与格式转换 【免费下载链接】ncmdump 项目地址: https://gitcode.com/gh_mirrors/ncmd/ncmdump 还在为网易云音乐下载的NCM格式文件无法在其他播放器播放而烦恼吗?ncmdump解密工具帮你轻松解决这个困…

2026/8/23 12:10:44 阅读更多 →
HarmonyOS 应用开发《掌上英语》第81篇: 智能体卡片:为英语学习 App 打造桌面级学习助手

HarmonyOS 应用开发《掌上英语》第81篇: 智能体卡片:为英语学习 App 打造桌面级学习助手

AgentCard 智能体卡片:为英语学习 App 打造桌面级学习助手适用平台:HarmonyOS 7.0 (API 26 Beta)一、引言 HarmonyOS 7.0(API 26 Beta)新增了 AgentCard 智能体卡片能力,这是继 HMAF(鸿蒙智能体框架&#x…

2026/8/22 3:22:48 阅读更多 →