piece must not include null character.
报错代码import torchfrom PIL import Imagefrom transformers import AutoTokenizer, AutoModelimport torchvision.transforms as transformsmodel_name /data/feature/lbg/models/SJY-1995_GeoTikzBridge-Base-8Btokenizer AutoTokenizer.from_pretrained(model_name,trust_remote_codeTrue)model AutoModel.from_pretrained(model_name,torch_dtypetorch.bfloat16,trust_remote_codeTrue,device_mapauto)def load_image(image_path):image Image.open(image_path).convert(RGB)transform transforms.Compose([transforms.Resize((448, 448)),transforms.ToTensor(),transforms.Normalize(mean[0.485, 0.456, 0.406], std[0.229, 0.224, 0.225])])return transform(image).unsqueeze(0).to(model.device)image_tensor load_image(/data/lbg/project/hunyuan/Hunyuan3D-Part/jihe_img/a14.png)question image\nGenerate TikZ code for this geometric figure.response model.chat(tokenizer,image_tensor,question,generation_config{max_new_tokens:4096,do_sample:False})print(response)/data/feature/lbg/envs/py310/bin/python /data/lbg/project/hunyuan/Hunyuan3D-Part/geo_tak_demo.py/data/feature/lbg/envs/py310/lib/python3.10/site-packages/transformers/utils/hub.py:124: FutureWarning: Using TRANSFORMERS_CACHE is deprecated and will be removed in v5 of Transformers. Use HF_HOME instead.warnings.warn(Traceback (most recent call last):File /data/lbg/project/hunyuan/Hunyuan3D-Part/geo_tak_demo.py, line 8, in moduletokenizer AutoTokenizer.from_pretrained(File /data/feature/lbg/envs/py310/lib/python3.10/site-packages/transformers/models/auto/tokenization_auto.py, line 865, in from_pretrainedreturn tokenizer_class.from_pretrained(File /data/feature/lbg/envs/py310/lib/python3.10/site-packages/transformers/tokenization_utils_base.py, line 2110, in from_pretrainedreturn cls._from_pretrained(File /data/feature/lbg/envs/py310/lib/python3.10/site-packages/transformers/tokenization_utils_base.py, line 2336, in _from_pretrainedtokenizer cls(*init_inputs, **init_kwargs)File /root/.cache/huggingface/modules/transformers_modules/SJY-1995_GeoTikzBridge-Base-8B/tokenization_internlm2.py, line 68, in __init__self.sp_model.Load(vocab_file)File /data/feature/lbg/envs/py310/lib/python3.10/site-packages/sentencepiece/__init__.py, line 209, in Loadreturn self.LoadFromFile(model_file)File /data/feature/lbg/envs/py310/lib/python3.10/site-packages/sentencepiece/__init__.py, line 213, in LoadFromFilereturn self._processor.LoadFromFile(filename)RuntimeError: INTERNAL: piece must not include null character.解决方法pip install sentencepiece0.1.99

相关新闻

零基础极速上手:用AI建站工具10分钟生成一个可备案的企业官网

零基础极速上手:用AI建站工具10分钟生成一个可备案的企业官网

如果你完全不懂技术,也没接触过网站建设,但又急需一个专业、合规的企业官网,这篇教程就是为你准备的。我们将抛开所有复杂的术语,模拟一个真实的操作流程,带你体验如何用AI建站工具,在10分钟内生成一个具备…

2026/10/16 7:34:10 阅读更多 →
HDMI寄存器配置实战:从时钟音频到HDCP的嵌入式驱动开发指南

HDMI寄存器配置实战:从时钟音频到HDCP的嵌入式驱动开发指南

1. HDMI寄存器系统概览与核心价值 如果你正在开发一个需要输出高清音视频的嵌入式设备,比如智能电视的主板、数字机顶盒或者专业的视频会议系统,那么你大概率绕不开HDMI接口。而要让HDMI接口稳定、可靠地工作,仅仅连接物理线路是远远不够的&a…

2026/10/16 20:22:34 阅读更多 →
AXI中的out of order和interleaving的定义和两者的差别?

AXI中的out of order和interleaving的定义和两者的差别?

AXI中的out of order和interleaving的定义和两者的差别 摘要:在 AXI (Advanced eXtensible Interface) 协议中,Out-of-Order 和 Interleaving 是两个与事务处理顺序和数据传输相关的概念,它们都与 AXI 协议支持的多事务并发处理能力有关,但它们的定义、作用和实现机…

2026/10/18 0:39:56 阅读更多 →

最新新闻

从字节序到内存对齐:数据在内存中的真实布局深度拆解

从字节序到内存对齐:数据在内存中的真实布局深度拆解

每个写过几年代码的人,一定都遇到过一个诡异的问题:某个变量在断点里看着是对的,可一传入函数就变了;浮点数比较怎么都对不上;结构体明明只声明了几个字段,内存占用却比想象中多一截。这些问题绝大多数都能…

2026/10/18 2:14:57 阅读更多 →
桌面应用集成大模型:本地离线推理选型与工程落地全攻略

桌面应用集成大模型:本地离线推理选型与工程落地全攻略

这个项目我记了挺久:把一个大模型真正装进桌面程序里跑起来,不联网、不上云、不开后台服务,用户双击图标就能用。今天把这轮本地离线推理的选型和工程落地过程完整复盘一遍,重点说清楚三件事——为什么坚持本地推理、模型与推理引…

2026/10/18 2:14:57 阅读更多 →
SAP固定资产处置实操:ABAVN+F-02替代ABAON的完整走账与避坑指南

SAP固定资产处置实操:ABAVN+F-02替代ABAON的完整走账与避坑指南

简介:本资源为SAP FI模块固定资产全流程操作手册,围绕固定资产报废、出售、盘点三大高频业务展开,重点讲解ABAVN、F-02、AW01N/AB03等标准事务码的运用,并配有完整的会计分录示例与科目结转规则,适合SAP FI顾问、财务关…

2026/10/18 2:14:57 阅读更多 →
engarde816:专为击剑赛事设计的离线编排工具

engarde816:专为击剑赛事设计的离线编排工具

简介:Engarde816是一款面向击剑赛事组织者、裁判团队及体育管理从业者的专业编排软件,专为解决中小型至大型击剑比赛中的赛程规划、对阵生成、实时成绩追踪等核心痛点而设计。资源包共38个文件,含1个可执行程序(Engarde.exe&#…

2026/10/18 2:14:57 阅读更多 →
OpenClaw 对接微信:保姆级教程及部署推荐(TaoToken 统一 Key 接入版)

OpenClaw 对接微信:保姆级教程及部署推荐(TaoToken 统一 Key 接入版)

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/18 2:14:57 阅读更多 →
NPU/TPU硬件加速本质:软硬协同的决策框架与落地实践

NPU/TPU硬件加速本质:软硬协同的决策框架与落地实践

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/18 2:13:56 阅读更多 →

日新闻

基于GMM的语音识别系统原理与MATLAB实现详解

基于GMM的语音识别系统原理与MATLAB实现详解

说到基于高斯混合模型(GMM)的语音识别系统,很多人第一反应就是一堆数学公式,觉得门槛很高。但如果你真的在MATLAB里把它落地跑通,会发现核心其实就是三件事:把声音变成特征向量,用GMM给每个类别…

2026/10/18 0:00:55 阅读更多 →
数字图像处理入门:反白、灰度化、调色板修改与导出txt实践

数字图像处理入门:反白、灰度化、调色板修改与导出txt实践

数字图像处理这四个字听起来挺唬人,但落到具体操作上,无非就是让计算机按你的想法“摆弄”像素。我在一个模拟项目X里用了一套特别经典的基础处理流程:对图像做反白、改调色板、彩色转灰度,最后把像素数据导出成txt文件。单看每一…

2026/10/18 0:00:55 阅读更多 →
机器人大脑技术盘点:具身智能的感知、决策与数据闭环

机器人大脑技术盘点:具身智能的感知、决策与数据闭环

如果你的信息流最近也天天刷到“机器人大脑”这个词,你会发现一个很有意思的现象:每个人说的“大脑”根本不是同一个东西。有人指的是大语言模型,有人指的是运动控制系统,还有人指的是能理解物理世界的端到端模型。在2026年这个时…

2026/10/18 0:00:55 阅读更多 →

周新闻

基于GMM的语音识别系统原理与MATLAB实现详解

基于GMM的语音识别系统原理与MATLAB实现详解

说到基于高斯混合模型(GMM)的语音识别系统,很多人第一反应就是一堆数学公式,觉得门槛很高。但如果你真的在MATLAB里把它落地跑通,会发现核心其实就是三件事:把声音变成特征向量,用GMM给每个类别…

2026/10/18 0:00:55 阅读更多 →
数字图像处理入门:反白、灰度化、调色板修改与导出txt实践

数字图像处理入门:反白、灰度化、调色板修改与导出txt实践

数字图像处理这四个字听起来挺唬人,但落到具体操作上,无非就是让计算机按你的想法“摆弄”像素。我在一个模拟项目X里用了一套特别经典的基础处理流程:对图像做反白、改调色板、彩色转灰度,最后把像素数据导出成txt文件。单看每一…

2026/10/18 0:00:55 阅读更多 →
机器人大脑技术盘点:具身智能的感知、决策与数据闭环

机器人大脑技术盘点:具身智能的感知、决策与数据闭环

如果你的信息流最近也天天刷到“机器人大脑”这个词,你会发现一个很有意思的现象:每个人说的“大脑”根本不是同一个东西。有人指的是大语言模型,有人指的是运动控制系统,还有人指的是能理解物理世界的端到端模型。在2026年这个时…

2026/10/18 0:00:55 阅读更多 →

月新闻

我发现了一个新思路:用 Remotion + Claude Code 像写代码一样自动化生成短视频

我发现了一个新思路:用 Remotion + Claude Code 像写代码一样自动化生成短视频

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/18 0:55:02 阅读更多 →
Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式:TaoToken 统一 Key 配置与验证

Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式:TaoToken 统一 Key 配置与验证

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/17 17:22:31 阅读更多 →
黑夜航拍船只数据集训练YOLOV5模型全流程解析

黑夜航拍船只数据集训练YOLOV5模型全流程解析

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/16 14:23:36 阅读更多 →