Karpathy实测Claude Opus:一段文本变5500行3D代码
OpenAI联合创始人Karpathy用Claude Opus 5将《魔戒》开篇转换为5500行代码的3D场景。
OpenAI联合创始人Karpathy用Claude Opus 5将《魔戒》开篇转换为5500行代码的3D场景。
Andrej Karpathy 让 AI 模型 Claude Opus 5 把《指环王》中的一个段落变成了浏览器里的 3D 场景,在大约两小时内生成了 5,500 行代码。
整个过程的成本约为 10 美元。模型自行放置物体并为其制作动画,但由于只能通过截图检查自己生成的视频,因此出现了一些错误。
在目前就职于 Anthropic 的 Karpathy 看来,这项测试展示了按需构建低成本定制游戏世界的潜力。不过,他认为这个结果更像是一次 vibe check,而不是严格的 benchmark。
输入《指环王》中的一个段落,输出 5,500 行代码。Andrej Karpathy 让 Claude Opus 5 把 Tolkien 的开篇内容变成了浏览器里的 3D 场景。
模型运行了大约两小时,token 预算为 100 万(约合 10 美元),并使用浏览器 3D 图形库 Three.js 渲染了所有内容。Karpathy 将源代码发布到了网上,其他人可以亲自运行并修改这个场景。
Karpathy 认为,广为人知的 pelican test 已经接近刷满了。Simon Willison 设计的这项趣味 benchmark,要求模型绘制一张 SVG 图片,内容是一只骑自行车的鹈鹕。之所以选择如此荒诞的 prompt,是为了确保这个主题不太可能已经存在于训练数据中。这一思路还可以追溯得更早。2023 年,Microsoft 在《Sparks of AGI》论文中让 GPT-4 使用 TikZ 绘制一只独角兽,并将结果视为空间推理能力的证据。当时的 GPT-4 仅使用文本数据训练,这与如今为各大聊天机器人提供支持的多模态模型不同。
Karpathy 称这个结果虽然粗糙,但很有趣。音频由 Eleven Labs 提供,物体的放置和动画则全部由模型自行完成。Karpathy 表示,没有人会手工构建这样的世界,但借助模型,成本几乎可以忽略不计。他认为,按需生成游戏世界很有潜力:用户可以被投放到其中,成为配角或主角。
不过,仍有一个问题。模型无法观看自己生成的视频,只能依靠截图检查结果,因此出现了错误。还有一些用户正在让 Opus 5 编写完整的浏览器游戏,从第一人称射击游戏到 Minecraft 克隆版都有。这些尝试都无法产出严格的 benchmark,只能算是 vibe check。
Karpathy 是 OpenAI 的联合创始人,曾担任 Tesla 的 AI 负责人。后来,他经营过教育初创公司 Eureka Labs,并于 2026 年 5 月开始在 Anthropic 从事预训练研究。
AI 新闻,拒绝炒作——由人类精心筛选
订阅 THE DECODER,即可享受无广告阅读、每周一期的 AI 新闻简报、每年六期独家前沿报告「AI Radar」、完整档案访问权限,以及评论区使用权限。