【OpenClaw 本地实战 Ep.1】抛弃 Ollama?转向 LM Studio!Windows 下用 NVIDIA 显卡搭建 OpenClaw 本地极速推理服务
1. 为什么在 Windows 上我最终把 Ollama 换成了 LM Studio如果你正在 Windows 11 上折腾 OpenClaw 这类本地 Agent 框架大概率踩过同一个坑明明插着一张 NVIDIA 显卡Ollama 却死活不肯把模型完整塞进显存推理速度慢到怀疑人生。我自己的测试机是 Intel Core Ultra 9 285K 加 RTX 3090 24GB跑ollama run的时候 GPU 利用率长期在 20% 上下晃nvidia-smi里显存占用只有 3GB 出头剩下的全压在 CPU 上。OpenClaw 一次任务编排要连续发好几轮请求这种速度根本没法用。OpenClaw 是一个本地优先的 Agent 编排框架能读文件、写代码、调工具适合想把智能体跑在自己机器上的开发者。它需要一个 OpenAI 兼容的推理后端Ollama 和 LM Studio 都能干这活。问题在于 Windows 下 Ollama 的 CUDA 调度经常失灵尤其是配合较新的 CPU 平台时GPU Offload 层数不会自动拉满你得手动去改num_gpu参数改完还不一定生效。LM Studio 在这件事上省心得多。它把 GPU Offload 做成了图形化开关加载模型时直接告诉你多少层跑在 GPU 上、占多少显存CUDA 识别状态一目了然。我实测同一个gpt-oss-20b模型Ollama 下生成速度约 18 tokens/sLM Studio 开启完整 GPU Offload 后稳定在 65 tokens/s 以上差距接近四倍。显存占用方面LM Studio 会把 24GB 里的 21GB 左右吃满Ollama 只用了不到 6GB。这篇是 OpenClaw 本地实战系列的第一篇只干一件事在 Windows NVIDIA 环境下用 LM Studio 搭出一个稳定的 OpenAI 兼容推理服务把 Base URL 和模型名准备好下一篇直接对接 OpenClaw。如果你只是想先跑通本地推理这篇也能独立使用。2. LM Studio 安装与 CUDA 加速配置让 RTX 显卡真正吃满显存LM Studio 的安装没什么门槛官网下载 Windows 安装包一路下一步就行。建议用 0.4.2 或更高版本旧版本在 CUDA 识别上有过 bug。装完之后先别急着下模型把显卡相关的设置调对否则后面加载模型还是会走 CPU。打开 LM Studio左下角齿轮图标进 Settings切到 Hardware 选项卡。这里有几个关键项第一确认GPUs下拉框里选中了你的 NVIDIA 显卡。如果这里显示的是No GPU detected说明 CUDA 运行时没被识别先更新显卡驱动到最新版再重启 LM Studio。第二勾选GPU detected with CUDA旁边的开关。这个开关控制是否启用 CUDA 后端关掉的话所有推理都会回落到 CPU。第三GPU Offload层数。加载模型时 LM Studio 会自动推荐一个值但你可以手动拉满。以 RTX 3090 24GB 为例跑 20B 级别的量化模型Q4_K_MOffload 层数拉到 99 基本就是全部塞进显存。如果显存不够LM Studio 会提示你降低层数这时候优先保证 KV Cache 留在显存里否则长上下文会爆。模型下载在左侧放大镜图标里搜推荐openai/gpt-oss-20b的 GGUF 量化版Q4_K_M 大概 12GB24GB 显存跑起来很宽裕。下载完成后回到聊天界面顶部模型选择器里选中它右侧面板会显示GPU Offload滑块和预估显存占用。这里有个我踩过的坑如果你同时开了 Ollama 的后台服务它会占用一部分显存导致 LM Studio 加载模型时显存不足。跑 LM Studio 之前先在任务管理器里把ollama.exe结束掉或者用ollama stop停掉所有已加载模型。配置完成后在 LM Studio 聊天窗口发一条测试消息看右侧的Speed指标。RTX 3090 跑 20B Q4 模型正常应该在 60 tokens/s 以上。如果只有个位数回去检查 CUDA 开关和 Offload 层数。3. 开启 LM Studio 本地服务OpenAI 兼容接口的完整配置模型能跑之后下一步是把它变成一个 OpenClaw 能调用的 HTTP 服务。LM Studio 内置了 OpenAI 兼容的 API Server不需要额外装任何东西。先开启无界面后台服务。Settings 里切到 Developer 选项卡找到Local LLM Service (Headless)区域勾选Enable Local LLM Service。这个选项的作用是让 LM Studio 在你不打开聊天窗口的情况下也能响应请求对 OpenClaw 这种后台调用的场景是必须的。选项下面的注解写得很清楚使用 LM Studio 的 LLM 服务器而无需保持 LM Studio 应用程序打开。然后启动 API Server。点击左侧侧边栏的Developer / Server (-)图标进入 Server 配置页。几个参数需要确认参数推荐值说明Port1234默认端口OpenClaw 配置里要对应CORS开启防止跨域请求被拦API Model Identifieropenai/gpt-oss-20b后面配置 OpenClaw 时要用这个字符串点击蓝色的Start Server按钮顶部状态变成绿色的Status: Running就说明服务起来了。右侧会显示当前加载的模型标识符这个字符串必须和 OpenClaw 配置里的model字段完全一致大小写都不能错。服务启动后LM Studio 会在http://127.0.0.1:1234/v1暴露标准的 OpenAI 接口。你可以用 curl 先验证一下curl http://127.0.0.1:1234/v1/models正常返回是一个 JSON 数组里面包含当前加载的模型 ID。如果返回Connection refused检查 Server 是否真的在 Running 状态以及 Windows 防火墙有没有拦 1234 端口。接下来是 OpenClaw 侧的配置。OpenClaw 的配置文件通常在用户目录下的.openclaw/config.json或项目根目录的openclaw.config.json具体路径取决于你的安装方式。核心配置项如下{ llm: { baseUrl: http://127.0.0.1:1234/v1, apiKey: lm-studio, model: openai/gpt-oss-20b, provider: openai } }三个字段缺一不可baseUrl指向 LM Studio 的本地服务地址apiKey随便填一个非空字符串就行LM Studio 不校验 Key但 OpenClaw 要求这个字段存在model必须和 LM Studio Server 页显示的 API Model Identifier 完全一致。如果你用的是 OpenClaw 的交互式设置向导在提示选择 provider 时选OpenAI Compatible然后依次填入上面的 Base URL、Key 和 Model ID。向导会自动写入配置文件省去手动编辑的麻烦。配置改完后重启 OpenClaw让它重新读取配置文件。下一篇会详细讲 OpenClaw 的启动和对接流程这里先把 endpoint 准备好。4. 连通性验证一次完整的对话请求与结果检查配置写好了不代表能通得实际发一次请求验证。最直接的方式是用 curl 打 LM Studio 的 chat completions 接口curl http://127.0.0.1:1234/v1/chat/completions \ -H Content-Type: application/json \ -H Authorization: Bearer lm-studio \ -d { model: openai/gpt-oss-20b, messages: [ {role: user, content: 用一句话说明什么是本地推理} ], temperature: 0.7, max_tokens: 128 }正常返回的 JSON 里choices[0].message.content就是模型生成的文本。如果返回401 Unauthorized检查Authorization头有没有带上虽然 LM Studio 不校验 Key但有些版本的 OpenClaw 会强制要求这个头存在。如果返回404 Not Found大概率是model字段和 LM Studio 里加载的模型 ID 对不上。curl 通了之后再通过 OpenClaw 发一次请求。启动 OpenClaw在它的交互界面里输入一个简单任务比如「列出当前目录下的文件」。OpenClaw 会把请求转发到 LM Studio你可以在 LM Studio 的Server Logs窗口看到实时的请求日志包括请求时间、模型名、token 数和响应耗时。我实测下来RTX 3090 跑gpt-oss-20bQ4_K_M单轮对话的首 token 延迟在 200ms 左右生成速度稳定在 65 tokens/s。OpenClaw 一次工具调用通常涉及 2 到 3 轮请求整体响应时间在 3 秒以内体验很流畅。如果你在 Server Logs 里看到请求进来了但迟迟没有响应检查 LM Studio 的模型是否还在加载中。大模型首次加载需要几十秒加载完成后 Server 才会真正开始处理请求。另外确认Enable Local LLM Service是勾选状态否则关掉聊天窗口后服务会停。验证通过后你的本地推理服务就算搭好了。这个 endpoint 可以同时给多个工具用OpenClaw、Continue、Cline 都能连。5. 常见报错排查401、local proxy failed 与 reading choices 的解法这一节整理我在 Windows LM Studio OpenClaw 组合下实际遇到过的报错以及对应的排查路径。报错一401 UnauthorizedOpenClaw 日志里出现这个通常是apiKey字段为空或者配置没被正确读取。LM Studio 本身不校验 Key但 OpenClaw 的 OpenAI 客户端要求这个字段非空。在配置文件里把apiKey设成任意字符串比如lm-studio然后重启 OpenClaw。如果重启后还是 401检查配置文件路径是否正确OpenClaw 可能读了另一个位置的配置。报错二local proxy failed或ECONNREFUSED 127.0.0.1:1234这个报错说明 OpenClaw 连不上 LM Studio 的服务。先确认 LM Studio 的 Server 状态是不是绿色的Running。如果 Server 没启动回到 Developer 页面点Start Server。如果 Server 在跑但依然连不上检查 Windows 防火墙有没有拦 1234 端口或者换个端口试试。还有一种情况是 LM Studio 开了无界面服务但主程序被关掉了这时候服务进程可能已经退出重新打开 LM Studio 并确认Enable Local LLM Service处于勾选状态。报错三Error reading choices或choices field missing这个报错通常出现在 OpenClaw 解析 LM Studio 返回的 JSON 时。原因可能是模型返回了非标准格式或者max_tokens设得太小导致响应被截断。先把max_tokens调到 512 以上再试。如果问题依旧检查 LM Studio 的模型是否完整加载有时候模型文件下载不完整会导致输出异常。删掉模型重新下载一次通常能解决。报错四OAuth相关报错如果你在 OpenClaw 里配置了多个 provider可能会遇到 OAuth token 冲突。OpenClaw 的某些版本会把 OpenAI 的 OAuth 流程和本地 endpoint 混在一起。解决办法是在配置文件里明确指定provider: openai并且不要填oauth相关字段。本地 LM Studio 不需要任何 OAuth 认证走的是纯 API Key 模式。报错五CUDA out of memory显存不够。降低 GPU Offload 层数或者换更小的量化版本。RTX 3090 24GB 跑 20B Q4 模型基本够用但如果上下文长度拉到 32k 以上KV Cache 会吃掉不少显存。可以在 LM Studio 的模型加载设置里把Context Length调到 8192 先跑通后续再按需增加。排查的时候养成看 LM StudioServer Logs的习惯请求有没有进来、模型有没有响应、耗时多少日志里都有。OpenClaw 侧的日志通常在~/.openclaw/logs/下两边对照着看能快速定位问题出在哪一层。6. 把 endpoint 切到 TaoToken统一 Key 通道与后续扩展本地 LM Studio 适合跑通流程和隐私敏感的场景但它有两个限制一是模型能力受限于你的显卡显存二是没法随时切换到更强的云端模型。如果你后面想让 OpenClaw 在本地模型和云端模型之间灵活切换可以把 endpoint 改到 TaoToken用统一的 Key 通道管理所有请求。TaoToken 提供 OpenAI 兼容的 API 接口Base URL 是https://taotoken.net/api。你需要在官网注册账号并生成 API Key然后把 OpenClaw 配置里的baseUrl和apiKey换掉{ llm: { baseUrl: https://taotoken.net/api, apiKey: 你的TaoToken API Key, model: claude-sonnet-4-20250514, provider: openai } }Model ID 根据你要用的模型填TaoToken 支持 Claude 系列、GPT 系列等主流模型。配置改完后重启 OpenClaw请求就会走 TaoToken 的通道不再依赖本地 LM Studio 服务。这样做的好处是 Key 通道统一了本地和云端的配置结构完全一致切换只需要改baseUrl和model两个字段。对于长期跑 Agent 任务的场景建议用 Coding Plan 套餐额度更充裕适合高频调用。如果你只是想先验证模型对话效果可以直接在模型对话页面测试。需要管理多个 Key 或者查看用量进 API Keys 页面操作。接入文档里有各语言的完整示例代码照着改就行。本地 LM Studio 和 TaoToken 并不冲突你可以保留本地配置作为离线备份日常用 TaoToken 跑复杂任务。OpenClaw 支持多 provider 配置在配置文件里加一个providers数组就能同时管理多个 endpoint切换的时候改一下默认 provider 就行。下一篇会讲 OpenClaw 的交互式设置向导怎么对接 LM Studio以及启动后的实际任务编排效果。本地服务已经就绪接下来就是让 OpenClaw 真正跑起来。

相关新闻

八数码问题C语言BFS实现:从伪广搜到工业级最短路径求解

八数码问题C语言BFS实现:从伪广搜到工业级最短路径求解

简介:本资源是一份面向计算机专业本科生与算法初学者的八数码问题求解实践材料,聚焦宽度优先搜索(BFS)思想在经典状态空间搜索问题中的C语言实现。资源以详实的DOC文档形式呈现,完整包含算法原理剖析、结构体设计逻辑、…

2026/10/15 12:38:06 阅读更多 →
OV7670+SDRAM+VGA:FPGA实时图像链路设计与避坑指南

OV7670+SDRAM+VGA:FPGA实时图像链路设计与避坑指南

简介:这是一套面向FPGA与数字图像处理学习者的完整工程实践资料,围绕OV7670 CMOS摄像头、SDRAM缓存与VGA显示构建实时视频采集与显示链路,并集成中值滤波算法改善画质。项目覆盖IIC寄存器配置、SDRAM控制器读写、VGA时序驱动以及灰度图像去噪…

2026/10/15 12:38:06 阅读更多 →
从8k到1M上下文的通用化:利用Qwen-Agent的创新实践

从8k到1M上下文的通用化:利用Qwen-Agent的创新实践

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/15 12:37:05 阅读更多 →

最新新闻

Spring Boot 部署实践:jar、war、Docker与Compose

Spring Boot 部署实践:jar、war、Docker与Compose

部署这事,看起来简单,实际坑不少。刚学 Spring Boot 的时候,我都是本地mvn spring-boot:run跑起来就完事,直到有一次要把一个“某订单服务”项目丢到测试服务器上给同事联调,才真正体会到“跑起来”和“部署好”是两码…

2026/10/15 13:21:53 阅读更多 →
python爬虫使用正则爬取网站的实现

python爬虫使用正则爬取网站的实现

前言 用正则表达式从网页里提取内容,是很多人接触爬虫的第一步:拿到 HTML 源码,用 re.findall 把链接、标题、价格抠出来。这条路学习成本低,但也最容易被用歪——既容易写出脆弱的模式,也容易忽视抓取的分寸。 本文要…

2026/10/15 13:21:53 阅读更多 →
图像超分辨入门:三种经典插值算法原理与实战对比

图像超分辨入门:三种经典插值算法原理与实战对比

从大一开始接触数字图像处理,我就发现“图像超分辨”这个名字有点劝退。很多人一上来就把它想成需要显卡、需要庞大训练集、需要跑上几天才能完成的深度学习任务。但实际上,在深度学习普及之前,甚至到现在很多工程场景里,基于插值…

2026/10/15 13:21:53 阅读更多 →
教育专用大模型:从问答工具到教学认知协作者

教育专用大模型:从问答工具到教学认知协作者

简介:本资源是之江实验室联合中国教育科学研究院发布的《重构教育图景:教育专用大模型研究报告(简版)》,面向教育技术研究者、AI教育产品开发者、K12学校信息化负责人及教育政策制定者,系统回应教育大模型‘…

2026/10/15 13:21:53 阅读更多 →
FFmpeg音频重采样与AAC编码优化实战指南

FFmpeg音频重采样与AAC编码优化实战指南

1. 音频重采样技术背景解析在数字音频处理领域,重采样(Resampling)是一项基础但至关重要的技术。简单来说,它就像把不同尺寸的图片进行缩放转换,只不过我们处理的对象是音频数据。当我们需要将音频从48kHz降到44.1kHz&…

2026/10/15 13:21:52 阅读更多 →
贪心算法实战:Prim最小生成树从原理到堆优化

贪心算法实战:Prim最小生成树从原理到堆优化

1. 从一个真实场景说起:为什么我们需要最小生成树很多人第一次接触最小生成树这个概念,是在算法课上听老师念PPT,什么“带权无向连通图”“边权和最小”“无环子图”,听完一头雾水,考试前背个模板就过去了。但如果你真…

2026/10/15 13:20:52 阅读更多 →

日新闻

Docker Compose 容器化部署 ChirpStack LoRaWAN 网络服务器实战

Docker Compose 容器化部署 ChirpStack LoRaWAN 网络服务器实战

1. 为什么选择容器化方式部署 LoRa 网络服务LoRa 物联网项目落地时,网络服务器是整个链路的核心枢纽。它负责接收网关上报的数据包、完成去重与解密、再把有效载荷分发给上层应用。早期大家习惯把网络服务器直接装在物理机上,依赖一堆系统库和特定版本的…

2026/10/15 0:00:46 阅读更多 →
共享LLM服务下的跨模型自动扩缩容:Kubernetes实战与避坑指南

共享LLM服务下的跨模型自动扩缩容:Kubernetes实战与避坑指南

1. 共享推理服务里,扩缩容到底难在哪做过大模型推理服务部署的人,大概都经历过这样的场景:一个团队共用一套推理集群,A 业务跑的是 7B 的小模型,B 业务跑的是 72B 的大模型,C 业务白天流量高、晚上几乎归零…

2026/10/15 0:00:46 阅读更多 →
Systemd 启动阶段根文件系统只读之谜:fstab 与 remount-fs 服务深度解析

Systemd 启动阶段根文件系统只读之谜:fstab 与 remount-fs 服务深度解析

1. 引子:一次内核恐慌引发的追查先从一个真实场景说起。某次我给一台老旧的嵌入式设备折腾系统裁减,为了把启动时间压进两秒以内,我手贱地把一串自认为“没用”的 systemd 服务给 disable 了,其中就包括systemd-remount-fs.servic…

2026/10/15 0:00:46 阅读更多 →

周新闻

流感时间序列预测实战:ARIMA/LSTM全流程拆解与避坑指南

流感时间序列预测实战:ARIMA/LSTM全流程拆解与避坑指南

简介:基于 ARIMA、LSTM、Transformer 等模型的流感时间序列预测 Python 源码,面向计算机相关专业课程设计与期末大作业学生,以及项目实战学习者。内容覆盖预处理、平稳性检验、定阶、残差分析、多模型对比预测的完整时序建模流程,…

2026/10/14 3:30:28 阅读更多 →
影刀RPA新手教程:键盘模拟输入实战——输入文本与模拟按键的区别

影刀RPA新手教程:键盘模拟输入实战——输入文本与模拟按键的区别

影刀RPA新手教程:键盘模拟输入实战——输入文本与模拟按键的区别 做影刀RPA自动化,十个新手有八个栽在"往输入框里填东西"这件事上:要么填不进去,要么填了一半,要么直接把原来内容追加在后面。这背后的根因&…

2026/10/14 16:30:29 阅读更多 →
影刀RPA新手教程:阅文起点小说数据采集实战——书籍信息与章节内容

影刀RPA新手教程:阅文起点小说数据采集实战——书籍信息与章节内容

影刀RPA新手教程:阅文起点小说数据采集实战——书籍信息与章节内容 1. 认识影刀:什么场景该用RPA采小说数据 起点中文网的页面结构相对稳定——分类榜单、书籍详情、章节内容三块独立页面,跳转链路清晰。这种场景非常适合影刀自动化&#x…

2026/10/14 3:29:58 阅读更多 →

月新闻

我发现了一个新思路:用 Remotion + Claude Code 像写代码一样自动化生成短视频

我发现了一个新思路:用 Remotion + Claude Code 像写代码一样自动化生成短视频

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/15 0:14:36 阅读更多 →
Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式:TaoToken 统一 Key 配置与验证

Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式:TaoToken 统一 Key 配置与验证

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/14 22:45:47 阅读更多 →
黑夜航拍船只数据集训练YOLOV5模型全流程解析

黑夜航拍船只数据集训练YOLOV5模型全流程解析

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/15 9:49:14 阅读更多 →