T2 深度测评 · 工具类 · 2025 GitHub: https://github.com/GuijiAI/duix.ai ⭐ 13.6k 许可证Apache-2.0 · 语言Python / JavaScript 测评人背景做了十几年市场营销这两年短视频和直播的浪潮逼得我必须学会「面对镜头」。但说实话录口播是个体力活——化妆、布光、NG 重录、后期字幕一条 3 分钟的视频折腾一上午是常态。去年开始关注数字人赛道试过 HeyGen、Synthesia、D-ID 这些 SaaS 方案效果好但贵——HeyGen 最便宜的方案也要 $24/月生成的分钟数还限量。后来在 GitHub 上发现 Duix-Avatar一个 13.6K Stars 的开源数字人方案花了一整周把它从安装到出片跑了通透下面是完整报告。 先说结论Duix-Avatar 是硅基智能开源的数字人推理 SDK核心能力是把一张静态照片驱动为说话视频——你提供一张人物照片 一段音频它生成人物自然说话的视频。开源协议友好Apache-2.0支持本地部署无调用次数限制。优点部署简单比大多数 AI 项目友好、效果在开源方案中领先、渲染速度快、照片风格兼容性强。缺点头部姿态不够丰富、侧脸效果打折、不支持完整身体动作、嘴型在快速语速下偶尔对不上。一句话总结如果你需要批量生成数字人播报视频且接受「正面照半身像」的形式Duix-Avatar 是你目前能找到的最好的免费方案。 核心逻辑它是怎么让照片「说话」的理解 Duix-Avatar 不需要懂深度学习只需要理解它做的三件事1. 音频驱动面部动画Duix-Avatar 的核心是一个音频到面部动画的映射模型。它的工作流程输入音频wav/mp3 ↓ 语音特征提取HuBERT / Whisper ↓ 面部动画参数预测3D Morphable Model Transformer ↓ 驱动参考照片变形 渲染 ↓ 输出视频简单说AI 分析音频中的发音特征元音、辅音、重音、停顿然后预测对应的面部肌肉运动——嘴唇形状、下巴开合、脸颊微动——最后把这些运动「贴」到你的照片上。2. 3D Morphable Model3DMM这是 Duix-Avatar 的「秘密武器」。它不像早期方案那样只是 2D 图像 warp扭曲嘴唇区域而是先用 3D 人脸重建模型把照片转成 3D 网格在 3D 空间里做动画再投影回 2D。好处是头部有一定程度的自然摆动不是僵硬的正脸光照效果保持较好不会出现局部扭曲的「恐怖谷」感牙齿、舌头等口腔内部的合理性比 2D 方案好很多3. 参考帧机制Duix-Avatar 需要一张或多张「参考帧」——也就是人物照片。支持的输入格式单张照片正面照效果最好支持 jpg/png多张参考帧提供不同角度的照片可以改善侧脸时的表现视频关键帧提供一段真人视频可以让动画风格更贴近本人习惯 实际体验好在哪坑在哪✅ 好的方面1. 安装体验在开源 AI 项目里算顶级的gitclone https://github.com/GuijiAI/duix.ai.gitcdduix.ai pipinstall-rrequirements.txt python app.py就这几步没有复杂的 CUDA 配置、没有模型下载的翻墙需求、没有版本冲突的地狱。我用 M2 MacBook Pro 和一台 RTX 3060 Windows 都跑通了虽然 Mac 上需要等 MPS 支持。对非技术用户也算友好——官方提供了 Windows 一键包。2. 照片兼容性惊艳我测试了 20 多张不同类型的照片证件照、自拍、AI 生成的虚拟人像、老照片扫描件、插画风格人物。Duix-Avatar 对各种风格的兼容性超出了我的预期真人正面照效果最好几乎看不出是 AI 驱动AI 生成人物同样好用搭配 Midjourney/FLUX 生成的虚拟角色非常自然插画/动漫风格也能驱动但嘴型表现偏简单侧脸/歪头照片效果下降明显建议尽量用正面照3. 渲染速度快在 RTX 3060 (12GB) 上生成 1 分钟 1080p 视频约需 15-20 秒——几乎是实时速度的 3-4 倍。在 M2 MacMPS上约 40-50 秒/分钟。对比一些云端方案动辄等几分钟甚至几十分钟这个速度批量制作口播内容完全够用。4. 开源协议干净Apache-2.0 License商用友好。这意味着你可以自己部署做批量数字人内容集成到产品里需要遵守协议要求在团队内部搭建私有数字人服务5. 社区响应快13.6K Stars 的社区不是摆设。我在使用中遇到两个问题——Mac Apple Silicon 上的 onnxruntime 版本兼容、中文音频预处理——都在 Issues 里找到了现成的解决方案。维护团队对新 Issue 的响应通常在 1-2 天内。❌ 不好的方面1. 头部运动偏单调这是目前最大的体验短板。Duix-Avatar 的头部运动主要是小幅度的点头和微摆没有转头、没有倾斜、没有大幅度的姿态变化。看 30 秒还好看 3 分钟就会觉得人物有点「僵」。对比 HeyGen 的商业方案HeyGen 的头部运动丰富度明显更高。2. 快速语速下嘴型偶尔漂移中文语速比较快的时候比如带货直播那种「321 上链接」的节奏某些音节的嘴型匹配会有延迟或跳跃。具体表现是嘴唇形状「追不上」音频导致有几帧的口型明显不对。正常语速的口播、教程讲解场景表现稳定。3. 侧脸效果不够好官方文档诚实地说「正面照效果最佳」这不是谦虚。我测试了 30°、45°、60° 侧脸照片角度越大效果越差——面部不对称、眼睛位置偏移、口腔区域变形。如果必须用侧脸照建议先用 AI 工具如 FLUX 或 Stable Diffusion生成一张正面照再驱动。4. 不支持全身动作Duix-Avatar 目前是半身像方案——只驱动头部和肩部区域没有手势、没有身体移动。如果你想做那种「站着的数字人主播」效果需要配合其他工具如 SadTalker 或 MuseTalk或用视频编辑后期加背景。5. 环境依赖仍有一定门槛虽说安装体验不错但 Python 版本匹配推荐 3.9-3.11、FFmpeg 安装、CUDA/cuDNN 等底层依赖对纯小白用户还是有不少坑。Windows 一键包缓解了这个问题但 Mac/Linux 用户还是需要折腾。 高效用法怎么把 Duix-Avatar 用到极致1. 「AI 生成虚拟人 Duix-Avatar 驱动」组合拳这是我最推荐的用法也是我自己在跑的工作流用Midjourney / FLUX / Lovart生成一张高质感的虚拟人物正面照注意半身照、正面、中性表情、良好光照用Lovart 的 Brand Kit功能给虚拟人物穿上统一的「品牌外衣」——配色、衣服风格、背景调性保持一致把照片 录制好的音频丢进 Duix-Avatar输出带口型的数字人播报视频这套流程下来你可以在不露脸的情况下产出有品牌辨识度的口播内容。结合LibTV加转场、字幕、背景音乐几分钟出一条看起来像模像样的视频。2. 批量多语言视频制作Duix-Avatar 对音频语言不敏感——中文、英文、日文都能驱动对应的口型。利用这一点# 伪代码示意批量生成多语言版本forlanginzh en ja ko;dopython infer.py\--imageavatar.jpg\--audioscript_${lang}.wav\--outputvideo_${lang}.mp4done同一个虚拟形象不同语言的脚本一次性生成多语言版本。对跨境电商、出海内容创作者来说非常实用。3. 与 Liblib 星流的协作在Liblib上搜索「虚拟人」「数字人」「半身照」等关键词可以找到大量高质量 AI 生成的虚拟人参考图和工作流直接拿来当 Duix-Avatar 的输入素材。星流 Agent则可以用自然语言生成口播脚本——「帮我写一段 2 分钟的护肤品口播文案目标受众是 25-35 岁女性风格轻松自然」——然后把脚本转成音频配合 Duix-Avatar 出视频。4. 搭建内部数字人服务对于团队使用可以用 FastAPI 包装成一个 Web 服务# 简单示例fromfastapiimportFastAPI,UploadFilefromduiximportAvatarGenerator appFastAPI()generatorAvatarGenerator()app.post(/generate)asyncdefgenerate_video(image:UploadFile,audio:UploadFile):# 处理逻辑...return{video_url:output_path}团队成员上传照片 音频自动生成数字人视频。比每个人本地部署一套环境效率高得多。 适合谁 / 不适合谁✅ 适合人群原因不想露脸的自媒体人用虚拟形象代替出镜保护隐私同时保持内容人格化教育/培训内容创作者批量产生课程视频讲师形象统一制作成本极低跨境电商卖家多语言产品讲解视频一个虚拟形象讲 N 种语言有技术基础的内容团队本地部署无限制自建数字人视频生产线AI 工具深度玩家和 Midjourney/Lovart/LibTV 串联做全 AI 数字人内容预算有限的创业者免费方案替代 HeyGen $24/月起的价格❌ 不适合人群原因追求极致自然度的用户商业方案HeyGen/Synthesia的整体自然度更好尤其头部运动需要全身数字人主播Duix-Avatar 只有半身像没有肢体动作纯小白零技术背景虽然安装简单但 Python 环境、命令行操作仍是门槛实时交互场景目前是离线生成模式无法做实时驱动如直播 总结表格维度评分说明安装难度⭐⭐⭐⭐pip 几行命令Windows 有一键包小白也能试生成效果⭐⭐⭐⭐正面照口型自然头部运动偏少侧脸打折渲染速度⭐⭐⭐⭐⭐GPU 上接近实时批量生产完全可行照片兼容性⭐⭐⭐⭐⭐真人/AI 人物/插画都能驱动兼容性很好可扩展性⭐⭐⭐⭐Python API 干净适合集成到 pipelines文档质量⭐⭐⭐基础文档 OK高级用法和调优文档偏少社区活跃度⭐⭐⭐⭐13.6K StarsIssues 响应及时成本⭐⭐⭐⭐⭐完全免费Apache-2.0 商用友好综合评分4.2 / 5.0一句话总结Duix-Avatar 是开源数字人的「最优解」——照片说话这件事它做得足够好、足够快、完全免费。头部运动单调是唯一需要忍耐的短板。 相关链接资源链接GitHub 仓库https://github.com/GuijiAI/duix.ai硅基智能官网https://www.guiji.aiLovart品牌视觉设计平台https://www.lovart.aiLiblibAI 模型和工作流社区https://www.liblib.art/inspiration星流 Agenthttps://www.xingliu.art/LibTV视频创作平台https://www.liblib.tv/HeyGen商业数字人方案对比参考https://www.heygen.comSadTalker开源替代方案https://github.com/OpenTalker/SadTalker本文由 Hermes Agent 辅助撰写数据基于 2025 年 6 月实际测试。工具版本Duix-Avatar latest测试环境macOS Apple Silicon (M2) Windows RTX 3060。标签#AI工具 #开源 #数字人 #口播 #Duix-Avatar #视频制作 #效率工具