ViQ: Text-Aligned Visual Quantized Representations at Any Resolution
Vi 论文 ViQ: Text-Aligned Visual Quantized Representations at Any Resolution 完整总结+分段双语翻译一、论文整体概述与核心创新(一)论文核心内容总结本文由腾讯优视团队联合清华、南洋理工、中科院研究者提出ViQ——一款支持原生任意分辨率、文本对齐的离散视觉量化表征框架,解决多模态大模型(MLLM)中连续视觉特征与文本离散token不匹配、量化后细节/语义二选一、固定分辨率限制、训练开销巨大四大痛点。现有视觉量化方案存在致命权衡:侧重重建的VQ类方法丢失高层语义;侧重多模态理解的量化模型压缩后底层细节严重丢失;同时主流CLIP/InternViT等视觉编码器仅支持固定输入尺寸,高维连续特征训练算力成本极高。ViQ采用两阶段渐进式量化训练,打通“文本对齐预训练→渐进离散量化”完整流程,兼顾语义对齐、细粒度图像重建、任意分辨率自适应三大能力,同时大幅降低多模态训练耗时与图像存储体积。大规模实验验证:多模态理解:仅1.3B参数量的ViQ,搭配Qwen2.5-1.5B/7B主干,综合基准得分超越InternViT(6B参数量)等SOTA连续视觉编码器,大幅领先QLIP、UniTok等现有量化视觉模型,在OCR、文档、图表识别任务优势显著;

相关新闻

从Token暴涨到系统雪崩:一次由配置文件与Cron任务引发的AI应用故障排查

从Token暴涨到系统雪崩:一次由配置文件与Cron任务引发的AI应用故障排查

1. 项目概述:一次由“废话”引发的系统雪崩 那天下午,我正喝着咖啡,监控大屏上突然弹出一条刺眼的告警:OpenClaw服务的核心token消耗速率曲线,在短短十分钟内拉出了一条近乎90度的直线,直接冲破了预设的红色…

2026/11/4 6:41:40 阅读更多 →
网络安全工程师学习路线与实战技能提升指南

网络安全工程师学习路线与实战技能提升指南

1. 网络安全工程师的职业定位与市场需求 网络安全工程师这个职业在数字化时代的重要性与日俱增。根据我过去五年在安全行业的观察,企业对于专业安全人才的需求每年以30%以上的速度增长。不同于普通IT运维岗位,网络安全工程师需要具备攻防两端的思维模式&…

2026/11/3 11:56:43 阅读更多 →
昆明网站建设王道下拉棒:揭秘那些被忽略但决定生死的用户体验细节与后端架构逻辑

昆明网站建设王道下拉棒:揭秘那些被忽略但决定生死的用户体验细节与后端架构逻辑

做昆明网站建设这一行,时间过得特别快。有时候你觉得昨天还在纠结代码的缩进,今天就得面对客户说“我要个大气的首页,要有那种科技感,最好还能自动适应手机端”。听起来很简单对吧?但实际上,这里面藏着无数的坑。特别是当你提到“昆明网站建设王道下拉棒”这个概念时,很…

2026/10/28 10:44:11 阅读更多 →

最新新闻

Electron桌面应用开发实战:从环境搭建到打包发布全流程

Electron桌面应用开发实战:从环境搭建到打包发布全流程

做前端这些年,我大部分时间都在跟浏览器标签页打交道,直到第一次把桌面应用跑起来,才发现原来自己一直被限制在地址栏和刷新按钮围起来的框框里。Electron这个词,最开始是在某段时间频繁出现在同事的讨论里,一个用HTML…

2026/11/4 1:35:24 阅读更多 →
滑盖智能锁T109深度解析:结构原理、安装调试与故障排查

滑盖智能锁T109深度解析:结构原理、安装调试与故障排查

简介:亚太天能T109滑盖智能锁产品说明书是一份PDF格式的官方技术文档,主要面向智能锁安装人员、终端用户及售后维护者,帮助快速掌握产品安装、配置与常见故障处理。全包仅1个PDF文件,大小4.37MB,内容结构清晰&#xff…

2026/11/3 10:57:27 阅读更多 →
PMSM弱磁控制原理与Simulink建模:高速AGV驱动系统设计指南

PMSM弱磁控制原理与Simulink建模:高速AGV驱动系统设计指南

上个月我在调试一台高速AGV的驱动系统,整车要求空载跑到8m/s,电机转速已经拉到额定点,驱动器的输出电压也顶到了母线电压极限附近。再往上踩速度指令,转速纹丝不动,三相电流反而开始震荡。那会儿我的第一反应就是&…

2026/11/3 11:35:49 阅读更多 →
C++核心知识点:从内存管理到STL的实战指南

C++核心知识点:从内存管理到STL的实战指南

C 这门语言我前前后后折腾了十几年,用它写过嵌入式驱动、做过游戏服务端,也搭过基础组件库。每次看到新人一头扎进"C 核心知识点"这个搜索词,我其实挺感慨的——这门语言的难点从来不是语法多,而是知识点之间的耦合太深…

2026/11/4 6:23:50 阅读更多 →
T109滑盖智能锁怎么装?安装调试与故障排查全攻略

T109滑盖智能锁怎么装?安装调试与故障排查全攻略

简介:亚太天能T109滑盖智能锁产品说明书以PDF格式发布,适合智能锁用户、安装人员与售后维修人员阅读。内容围绕T109系列指纹密码刷卡锁展开,先介绍前面板、后面板、锁体、机械钥匙、电池盒盖等部件名称与功能,再给出完整安装步骤&…

2026/11/3 10:47:27 阅读更多 →
LLM知识降熵:从信息垄断到理解权下放

LLM知识降熵:从信息垄断到理解权下放

你有没有过这种经历:翻开源码注释、论文摘要或者一份专业报告,每个字都认识,连在一起却像天书。想找人聊聊,身边要么没人懂,要么懂的懒得跟你解释。后来我试着把同一段内容丢给一个大语言模型,几秒钟之后&a…

2026/11/3 10:57:33 阅读更多 →

日新闻

周新闻

月新闻