134、视频编码与码率控制：H.264/H.265/VVC在影像系统的应用去年秋天，我在一个车载环视项目上被一个bug卡了整整两周。客户反馈说，倒车影像在低速转弯时，画面突然出现马赛克，像打了一层马赛克滤镜。我第一反应是ISP的降噪参数太激进，结果调了一轮降噪，问题依旧。后来抓了码流分析，发现是编码器在场景纹理复杂时，码率控制策略失效，瞬间溢出导致丢帧。那一刻我才意识到，视频编码在影像系统里从来不是“最后一道工序”，而是整个链路里最容易翻车的环节。编码器选型：不是越新越好H.264至今仍是嵌入式影像系统的主力。为什么？因为它的硬件编码器IP成熟，延迟可控，功耗低。我见过太多团队一上来就上H.265，结果在低端SoC上跑不动，帧率掉到15fps，还不如H.264跑30fps画质好。H.265的编码复杂度大约是H.264的3-5倍，解码端也是2-3倍。在安防监控场景下，带宽敏感，H.265确实能省30%-50%的码率，但前提是你的芯片有硬编支持。别指望软编码，手机SoC的CPU在4K@60fps下软编码H.265，功耗直接飙到5W以上，散热扛不住。VVC（H.266）目前只在高端云转码和广电领域有落地。车载和手机端，2025年之前别碰。VVC的编码复杂度是H.265的10倍，解码复杂度是4倍。除非你的产品是8K@120fps的旗舰机，否则老老实实用H.265。码率控制：影像系统的命门码率控制的核心就一句话：在带宽约束下，让每一帧的失真最小化。但实际做起来，全是坑。