ViQ: Text-Aligned Visual Quantized Representations at Any Resolution
Vi 论文 ViQ: Text-Aligned Visual Quantized Representations at Any Resolution 完整总结+分段双语翻译一、论文整体概述与核心创新(一)论文核心内容总结本文由腾讯优视团队联合清华、南洋理工、中科院研究者提出ViQ——一款支持原生任意分辨率、文本对齐的离散视觉量化表征框架,解决多模态大模型(MLLM)中连续视觉特征与文本离散token不匹配、量化后细节/语义二选一、固定分辨率限制、训练开销巨大四大痛点。现有视觉量化方案存在致命权衡:侧重重建的VQ类方法丢失高层语义;侧重多模态理解的量化模型压缩后底层细节严重丢失;同时主流CLIP/InternViT等视觉编码器仅支持固定输入尺寸,高维连续特征训练算力成本极高。ViQ采用两阶段渐进式量化训练,打通“文本对齐预训练→渐进离散量化”完整流程,兼顾语义对齐、细粒度图像重建、任意分辨率自适应三大能力,同时大幅降低多模态训练耗时与图像存储体积。大规模实验验证:多模态理解:仅1.3B参数量的ViQ,搭配Qwen2.5-1.5B/7B主干,综合基准得分超越InternViT(6B参数量)等SOTA连续视觉编码器,大幅领先QLIP、UniTok等现有量化视觉模型,在OCR、文档、图表识别任务优势显著;

相关新闻

从Token暴涨到系统雪崩:一次由配置文件与Cron任务引发的AI应用故障排查

从Token暴涨到系统雪崩:一次由配置文件与Cron任务引发的AI应用故障排查

1. 项目概述:一次由“废话”引发的系统雪崩 那天下午,我正喝着咖啡,监控大屏上突然弹出一条刺眼的告警:OpenClaw服务的核心token消耗速率曲线,在短短十分钟内拉出了一条近乎90度的直线,直接冲破了预设的红色…

2026/10/13 2:00:08 阅读更多 →
网络安全工程师学习路线与实战技能提升指南

网络安全工程师学习路线与实战技能提升指南

1. 网络安全工程师的职业定位与市场需求 网络安全工程师这个职业在数字化时代的重要性与日俱增。根据我过去五年在安全行业的观察,企业对于专业安全人才的需求每年以30%以上的速度增长。不同于普通IT运维岗位,网络安全工程师需要具备攻防两端的思维模式&…

2026/9/29 17:20:42 阅读更多 →
昆明网站建设王道下拉棒:揭秘那些被忽略但决定生死的用户体验细节与后端架构逻辑

昆明网站建设王道下拉棒:揭秘那些被忽略但决定生死的用户体验细节与后端架构逻辑

做昆明网站建设这一行,时间过得特别快。有时候你觉得昨天还在纠结代码的缩进,今天就得面对客户说“我要个大气的首页,要有那种科技感,最好还能自动适应手机端”。听起来很简单对吧?但实际上,这里面藏着无数的坑。特别是当你提到“昆明网站建设王道下拉棒”这个概念时,很…

2026/10/10 3:17:12 阅读更多 →

最新新闻

CLRS《算法导论》第 3 版习题解答库:目录结构、内容覆盖与 MkDocs + KaTeX 建站流水线详解

CLRS《算法导论》第 3 版习题解答库:目录结构、内容覆盖与 MkDocs + KaTeX 建站流水线详解

文档教程教育 【免费下载链接】CLRS 📚 Solutions to Introduction to Algorithms Third Edition 项目地址: https://gitcode.com/gh_mirrors/clr/CLRS 点击查看 免费下载 本仓库是针对 Introduction to Algorithms(CLRS)第 3 版…

2026/10/13 2:00:18 阅读更多 →
还在手动写 UI?用 TaoToken 统一 Key 让 AI 分分钟帮你搞定!

还在手动写 UI?用 TaoToken 统一 Key 让 AI 分分钟帮你搞定!

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/13 2:00:18 阅读更多 →
2025年AI漫剧工具亲测:用TaoToken统一Key打通AI漫剧制作与小说创作双流程

2025年AI漫剧工具亲测:用TaoToken统一Key打通AI漫剧制作与小说创作双流程

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/13 2:00:18 阅读更多 →
Fork/Join框架实战:从分而治之到工作窃取,掌握并发编程核心范式

Fork/Join框架实战:从分而治之到工作窃取,掌握并发编程核心范式

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/13 2:00:18 阅读更多 →
STM32智能体重秤设计:从HX711称重到校准算法全解析

STM32智能体重秤设计:从HX711称重到校准算法全解析

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/13 2:00:18 阅读更多 →
基于LSTM的五类动作识别源码包:从视频特征提取到可视化全流程

基于LSTM的五类动作识别源码包:从视频特征提取到可视化全流程

简介:这份资源面向深度学习入门者、课程设计与毕业设计学生,以及需要快速验证行为识别方案的技术人员,提供一套可直接运行的五类动作识别项目源码。项目覆盖jump、walk、pickup、salute、wave五种日常动作,并实现LSTM、TA-LSTM、S…

2026/10/13 1:59:18 阅读更多 →

日新闻

物联网系统集成避坑指南:从选型到验收的关键要点

物联网系统集成避坑指南:从选型到验收的关键要点

做了这么多年物联网系统集成的项目,我最大的感受是,大部分坑不是出在技术前沿,而是出在一些看起来很平常的地方。设备选了便宜的、协议没问清楚、现场没摸透、验收标准写得含糊——这些细枝末节,最后都会变成延期、超支和扯皮的大…

2026/10/13 0:00:57 阅读更多 →
ESP32舵机控制全攻略:从PWM原理到高级玩法与常见故障排查

ESP32舵机控制全攻略:从PWM原理到高级玩法与常见故障排查

如果你玩ESP32有一阵子了,很难不碰到舵机控制这道坎。做智能小车要转方向,做机械臂要抬关节,做云台要偏航俯仰,背后都是同一个东西在干活:舵机。而我见过太多人卡在“代码能编译、舵机就是不听话”这个阶段&#xff0c…

2026/10/13 0:00:57 阅读更多 →
CAN总线原理与STM32实战:抗干扰、仲裁、错误处理全解析

CAN总线原理与STM32实战:抗干扰、仲裁、错误处理全解析

1. 为什么CAN总线至今仍是工业现场的“硬通货”?——从汽车底盘到智能温室的真实需求你有没有拆过一辆老款燃油车的中控台?或者调试过某高校实验室里那台跑着Modbus协议却频频丢帧的PLC控制柜?又或者,在某个农业物联网项目里&…

2026/10/13 0:00:57 阅读更多 →

周新闻

流感时间序列预测实战:ARIMA/LSTM全流程拆解与避坑指南

流感时间序列预测实战:ARIMA/LSTM全流程拆解与避坑指南

简介:基于 ARIMA、LSTM、Transformer 等模型的流感时间序列预测 Python 源码,面向计算机相关专业课程设计与期末大作业学生,以及项目实战学习者。内容覆盖预处理、平稳性检验、定阶、残差分析、多模型对比预测的完整时序建模流程,…

2026/10/12 0:16:30 阅读更多 →
影刀RPA新手教程:键盘模拟输入实战——输入文本与模拟按键的区别

影刀RPA新手教程:键盘模拟输入实战——输入文本与模拟按键的区别

影刀RPA新手教程:键盘模拟输入实战——输入文本与模拟按键的区别 做影刀RPA自动化,十个新手有八个栽在"往输入框里填东西"这件事上:要么填不进去,要么填了一半,要么直接把原来内容追加在后面。这背后的根因&…

2026/10/12 0:16:38 阅读更多 →
影刀RPA新手教程:阅文起点小说数据采集实战——书籍信息与章节内容

影刀RPA新手教程:阅文起点小说数据采集实战——书籍信息与章节内容

影刀RPA新手教程:阅文起点小说数据采集实战——书籍信息与章节内容 1. 认识影刀:什么场景该用RPA采小说数据 起点中文网的页面结构相对稳定——分类榜单、书籍详情、章节内容三块独立页面,跳转链路清晰。这种场景非常适合影刀自动化&#x…

2026/10/13 1:58:08 阅读更多 →

月新闻

我发现了一个新思路:用 Remotion + Claude Code 像写代码一样自动化生成短视频

我发现了一个新思路:用 Remotion + Claude Code 像写代码一样自动化生成短视频

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/12 21:05:09 阅读更多 →
Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式:TaoToken 统一 Key 配置与验证

Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式:TaoToken 统一 Key 配置与验证

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/12 14:48:49 阅读更多 →
黑夜航拍船只数据集训练YOLOV5模型全流程解析

黑夜航拍船只数据集训练YOLOV5模型全流程解析

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/12 18:11:17 阅读更多 →