Karpathy入职A厂第一条长推文:用Opus 5把《指环王》第一段变成了3D动画,暴露LLM大缺陷
Andrej Karpathy刚刚做了一个实验结果让他自己也觉得有点不可思议。Karpathy入职A厂后第一个长推文是关于测试模型能力的AK认为大模型目前的能力非常震撼但还有比较大的缺陷以Opus 5为例构建3D世界只能靠缓慢截图原生视觉与玩游戏能力依然极度匮乏这个结论我想大家都有体会我测试了DeepSeek v4 flash 0731和Kimi K3 max放在文后了对比结果显示DeepSeek急需要视觉能力如果视觉能力加上那么DeepSeek v4 flash 0731就会变成一个真正的怪兽模型。Andrej Karpathy刚刚做了一个实验结果让他自己也觉得有点不可思议。他把《魔戒》的开头第一段文字扔给Opus 5给了大约100万token的上下文预算折合花费约10美元然后问它能不能用Three.js把这段文字渲染成三维画面。Opus 5跑了将近两个小时写出了5500行代码用程序化的方式把这段故事场景完整呈现出来。Karpathy说成品有点粗糙但挺有意思。让他真正觉得不可思议的是这件事本身的性质一个语言模型需要在(x,y,z)坐标空间里安置和调度各种多边形资产还要写出让它们动起来的动画代码而它居然做到了。他特别提到这类例子的意义所在。没有人会在正常工作中花时间去写这么定制化的东西但AI有的是耐心这件事的成本几乎为零。于是原本属于没人会去做这个类别的事情现在变成了为什么不做。他认为这样的事情可能还有很多。他进一步展开想象未来可以按需生成高度定制的世界玩家可以作为旁观者NPC进入《魔戒》故事也可以扮演其中某个角色。他把这个想象描述为某种类似按需生成的侠盗猎车手版X故事。当然这次实验也暴露出一个明显的短板。Opus 5在生成这些代码之后没法有效地自己验证成果因为它既不能高效感知视频也没办法在生成的场景里直接玩。它能做的是非常缓慢地在不同节点截图查看结果也确实出了一些问题留下了不少瑕疵。Karpathy认为多模态感知能力和直接玩游戏的能力目前依然是LLM比较明显的欠缺之处。音频部分是Karpathy自己手动用ElevenLabs完成的AI可以轻松调用对应的API但他在声音选择上比较挑剔所以这块自己来做了。Karpathy说的这个我也深有体会我用deepseek v4 flash 0731版本构建模拟火星登陆同样的提示词用HTML和three.js制作一个火星登陆模拟过程全程要符合物理过程逼真发挥你最大的想象力开始吧Kimi k3 max 花了1个半小时DeeSeek V4 flash 0731花了大概20分钟速度非常快对于一个284B 参数激活参数只有13B的模型效果已经非常震撼了,但是deepseek由于没有视觉能力不能一边截图一边测试最终效果与K3还是有差距的以下是对比不过如果不涉及视觉的话DeeSeek V4 flash 0731干活确实很爽我爬了Paul Graham所有散文制作成了eupb中英文对照电子书全程花费10快钱左右时间为1个小时左右用的是Hermes 消耗token大概1.5亿有需要的后台可以私信我「Paul」获取电子书。内容效果token消耗

相关新闻

DeepSeek-V4-Flash正式版发布并开源,全面超越V4-Pro预览版

DeepSeek-V4-Flash正式版发布并开源,全面超越V4-Pro预览版

DeepSeek-V4-Flash都已经这么出色了,DeepSeek-V4-Pro该有多厉害!值得狠狠期待一下。DeepSeek-V4-Flash正式版发布了!304B的轻量级模型,仅仅进行了后训练,性能就远远超过V4-Pro预览版,几乎与Claude Opus-4.8…

2026/10/17 1:36:56 阅读更多 →
Agentic SRE 落地实战:告别救火式运维,解锁人机协同可靠性新范式

Agentic SRE 落地实战:告别救火式运维,解锁人机协同可靠性新范式

落地 Agentic SRE 不是跟风追热点,而是顺势完成能力升级与角色转型。传统 SRE 的核心目标是减少运维琐事、提升系统韧性、快速处置突发故障,而 Agentic SRE(智能体站点可靠性工程)是基于大语言模型(LLM)迭代…

2026/10/16 9:44:36 阅读更多 →
Unity运行时调试台:核心功能、性能优化与实战指南

Unity运行时调试台:核心功能、性能优化与实战指南

1. 项目概述:为什么我们需要一个运行时调试台?在Unity项目开发的中后期,尤其是临近上线或者进行复杂功能迭代时,一个高效的运行时调试工具不再是“锦上添花”,而是“雪中送炭”。想象一下这个场景:你的游戏…

2026/10/6 7:12:44 阅读更多 →

最新新闻

MATLAB实现Elman神经网络电力负荷预测:时序建模与工程实践

MATLAB实现Elman神经网络电力负荷预测:时序建模与工程实践

1. 项目概述与核心需求解析电力负荷预测这个题目,在电力系统里是老生常谈,但真正把它做好的人不多。我接触过不少相关项目,也见过很多人拿历史负荷数据直接塞进神经网络里就跑,结果训练集误差看着挺漂亮,一到验证集就原…

2026/10/17 12:54:09 阅读更多 →
帧同步原理与实现:从输入同步到确定性保障

帧同步原理与实现:从输入同步到确定性保障

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/17 12:54:09 阅读更多 →
算法OJ作业Lecture(4):四重能力压力测试与破题心法

算法OJ作业Lecture(4):四重能力压力测试与破题心法

1. 这不是一节普通课,而是一次算法能力的“压力测试”“程序设计与算法 | (8) Lecture(4) OJ作业”——看到这个标题,很多刚接触算法训练的同学第一反应是:又到在线判题系统(OJ)交作业的时间了。但如果你真这么想&…

2026/10/17 12:54:09 阅读更多 →
North-Micro-Vision-Instruct-bf16 图像输入完全攻略:从本地图片到 URL 的多模态实战

North-Micro-Vision-Instruct-bf16 图像输入完全攻略:从本地图片到 URL 的多模态实战

【免费下载链接】North-Micro-Vision-Instruct-bf16 项目地址: https://ai.gitcode.com/hf_mirrors/mlx-community/North-Micro-Vision-Instruct-bf16 点击查看 免费下载 North-Micro-Vision-Instruct-bf16 是一款面向 Apple Silicon 的多模态视觉语言模型&#xf…

2026/10/17 12:54:09 阅读更多 →
为什么你的小模型推理变慢了?SmolLM-Instruct_rai_1.8.0_medusa_1.0_npu 性能调优 10 个技巧

为什么你的小模型推理变慢了?SmolLM-Instruct_rai_1.8.0_medusa_1.0_npu 性能调优 10 个技巧

大模型基础模型 【免费下载链接】SmolLM-Instruct_rai_1.8.0_medusa_1.0_npu 项目地址: https://ai.gitcode.com/hf_mirrors/amd/SmolLM-Instruct_rai_1.8.0_medusa_1.0_npu 点击查看 免费下载 小模型推理明明应该飞快,为什么跑起来却越来越慢&#xff…

2026/10/17 12:54:09 阅读更多 →
Docker Harbor 安装配置全解析:从部署到运维的镜像治理实践

Docker Harbor 安装配置全解析:从部署到运维的镜像治理实践

做容器化落地的人迟早会碰到一个问题:镜像越来越多,靠 Docker 自带的 Registry 管不住权限,也管不住审计和复制。Docker Harbor安装配置就成了绕不开的一环——把 Harbor 部署起来,给团队一个靠谱的镜像中心。尤其是当团队规模超过…

2026/10/17 12:53:09 阅读更多 →

日新闻

DeepSeek选型与部署:V3/R1、Ollama、API全攻略

DeepSeek选型与部署:V3/R1、Ollama、API全攻略

简介:《DeepSeek使用方法.pdf》是一份面向DeepSeek入门及进阶用户的完整使用指南,重点围绕V3与R1两款模型的能力差异与适用场景展开,帮助读者根据任务类型与成本选择合适的模型。资源共1个PDF文件,压缩包大小约311KB,篇…

2026/10/17 0:00:25 阅读更多 →
200+Deepseek润色指令拆解:从底层原理到场景落地的完整指南

200+Deepseek润色指令拆解:从底层原理到场景落地的完整指南

简介:这是一份聚焦DeepSeek提示词优化的《200Deepseek润色指令》PDF文档,共收录两百余条可直接套用的润色指令,涵盖语法修正、风格统一、逻辑梳理、表达精炼等维度,并针对商务写作、学术论文、广告文案等场景给出差异化建议。文档…

2026/10/17 0:00:25 阅读更多 →
OpenCV轮廓法物体计数系统:轻量、可控、可落地的工业级实现

OpenCV轮廓法物体计数系统:轻量、可控、可落地的工业级实现

简介:本资源是一份基于OpenCV的本科课程设计完整报告,面向计算机视觉初学者、图像处理学习者及高校通信/信息类专业学生,解决物体智能计数与检测结果结构化记录的实际问题。项目覆盖图像预处理、轮廓检测、边界框绘制、轨迹栏交互式参数调节、…

2026/10/17 0:00:25 阅读更多 →

周新闻

流感时间序列预测实战:ARIMA/LSTM全流程拆解与避坑指南

流感时间序列预测实战:ARIMA/LSTM全流程拆解与避坑指南

简介:基于 ARIMA、LSTM、Transformer 等模型的流感时间序列预测 Python 源码,面向计算机相关专业课程设计与期末大作业学生,以及项目实战学习者。内容覆盖预处理、平稳性检验、定阶、残差分析、多模型对比预测的完整时序建模流程,…

2026/10/16 21:35:51 阅读更多 →
影刀RPA新手教程:键盘模拟输入实战——输入文本与模拟按键的区别

影刀RPA新手教程:键盘模拟输入实战——输入文本与模拟按键的区别

影刀RPA新手教程:键盘模拟输入实战——输入文本与模拟按键的区别 做影刀RPA自动化,十个新手有八个栽在"往输入框里填东西"这件事上:要么填不进去,要么填了一半,要么直接把原来内容追加在后面。这背后的根因&…

2026/10/17 1:44:59 阅读更多 →
影刀RPA新手教程:阅文起点小说数据采集实战——书籍信息与章节内容

影刀RPA新手教程:阅文起点小说数据采集实战——书籍信息与章节内容

影刀RPA新手教程:阅文起点小说数据采集实战——书籍信息与章节内容 1. 认识影刀:什么场景该用RPA采小说数据 起点中文网的页面结构相对稳定——分类榜单、书籍详情、章节内容三块独立页面,跳转链路清晰。这种场景非常适合影刀自动化&#x…

2026/10/16 15:04:24 阅读更多 →

月新闻

我发现了一个新思路:用 Remotion + Claude Code 像写代码一样自动化生成短视频

我发现了一个新思路:用 Remotion + Claude Code 像写代码一样自动化生成短视频

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/16 21:54:38 阅读更多 →
Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式:TaoToken 统一 Key 配置与验证

Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式:TaoToken 统一 Key 配置与验证

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/16 3:49:43 阅读更多 →
黑夜航拍船只数据集训练YOLOV5模型全流程解析

黑夜航拍船只数据集训练YOLOV5模型全流程解析

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/16 14:23:36 阅读更多 →