当DeepSeek开始3D建模,AI离独立交付还有多远?千问BlenderWorld给出了新回答

机智流 2026-10-17 23:46

当DeepSeek开始3D建模,AI离独立交付还有多远?千问BlenderWorld给出了新回答图1

当DeepSeek开始3D建模,AI离独立交付还有多远?千问BlenderWorld给出了新回答图2

今天 DeepSeek 重磅发布了 V4.1 Flash 1017。按照官方介绍[1],这次更新通过基于自反馈的强化学习,增强从零开发游戏、搭建 3D 项目的能力,并向我们展示了故宫建模等非常出色的案例。“许愿式编程”的边界,正在向三维空间延伸。

3D 创作的一个潜在机会,是把建模、检查、按反馈修改串成可执行的流程。如果智能体能在达到交付要求的前提下,减少人工操作和返工,就可能带来实际收益。这是一个需要验证的价值假设,关键证据应来自与现有工具、人工工作流的比较。

围绕这些环节,在过去几年里,3D-GPT[2] 探索用大语言模型驱动程序化建模,BlenderGym[3] 将图形编辑纳入评测,Autodesk 等提出的 neuralCAD-Edit[4] 则收集了十位专业设计师的 CAD 修改请求。这些工作逐步提供了任务样本与能力评测方法。

最近,千问团队开源了 BlenderWorld,该工作把评测推进到交付环节:给定参考和规格,智能体能否交出符合要求、可以继续编辑的工程?它提供的验收结果,可以帮助识别哪些工作已经能够完成、哪些环节仍需人工介入,为后续比较效率和成本提供基础。

当DeepSeek开始3D建模,AI离独立交付还有多远?千问BlenderWorld给出了新回答图3

论文:BlenderWorld: Benchmarking Visual Agents for 3D Creation from Real-World References

作者:Xinyu Fang、Yuchi Wang、Weihao Yu 等;通讯作者:Dahua Lin、Guofeng Zhang、Zhibo Yang

单位:浙江大学、阿里巴巴集团 Alibaba Token Hub、香港中文大学、复旦大学、南洋理工大学

论文链接:https://github.com/QwenLM/BlenderWorld/blob/main/docs/BlenderWorld__Benchmarking_Visual_Agents_for_3D_Creation_from_Real_World_References.pdf

开源仓库:https://github.com/QwenLM/BlenderWorld

背景:一张漂亮效果图,离完整工程还有多远

实际的 3D 创作请求往往同时包含外观、结构和用途要求:根据照片重建室内空间,按指定尺寸调整家具,或者参考一段视频制作带运动效果的场景。智能体需要理解参考材料、操作软件、检查结果,再连续修改。

难点在于,这类任务通常没有唯一的标准模型。两份结构不同的工程可能都满足需求;同样,一张渲染图看起来不错,背后的物体却可能没有厚度、悬在空中,或缺少指定的骨骼与动画。

BlenderWorld 选择开源三维创作软件 Blender 作为环境,要求提交可编辑的 .blend 工程以及规定的图像、视频等产物。评测对象由此扩展为整个创作过程最终交付的工程。

创新点:把开放需求拆成可以验收的条件

基准包含 223 项任务 ,覆盖 9 个大类、22 个子类和 16 种应用场景,包括建筑与室内、产品、角色动物、自然环境和科学可视化等。其中 78 项以文本为输入,130 项附图像、15 项附视频;59 项还提供尺寸、材质、相机参数等规格文件。

参考材料承担三种作用:

  • 重建强调保留主要形状和空间关系;
  • 修改要求保留指定结构并完成变化;
  • 参考设计则借用造型、风格或布局,发展新方案。
当DeepSeek开始3D建模,AI离独立交付还有多远?千问BlenderWorld给出了新回答图4
图 1:BlenderWorld 的任务分类与示例,参考材料位于左侧或上方,GPT-6-Astra 的结果位于右侧或下方。

这些任务由筛选的参考材料和应用场景出发,经多模态模型辅助生成需求,再检查文件可用性、图文对应和约束一致性。它们模拟现实创作请求,并经过专门的验证流程。

更关键的是 2,651 条二元验收条件 :每项任务有 6—22 条,分别检查几何、功能、材质、布局、物理关系等要求。重要程度对应 3、2、1 的权重。条件经过独立模型复核和试评后冻结,对生成智能体隐藏。

方法:多角度看效果,打开工程查结构

交付完成后,评测系统重新打开工程,按任务选择 8 个互补视角进行渲染。它可以调整相机与渲染设置,但须保留提交作品的几何、材质、灯光和动画,不能替参评系统修复模型。

随后,验收条件按证据类型分流。

  • 外观、布局和运动由视觉语言模型结合新视图、原始导出图及视频帧判断;
  • 物体结构、工程属性等要求,则由另一个智能体调用工具检查原生文件。

全部条件中,58.2% 需要场景检查 ,单靠观看渲染图无法完成验收。

当DeepSeek开始3D建模,AI离独立交付还有多远?千问BlenderWorld给出了新回答图5
图 2:BlenderWorld 的评测流程,结合多视角渲染、工程内部检查与视觉质量评价。

系统另外评估保真度、物理合理性、比例尺度、灯光材质等 8 个视觉质量维度。

最终综合分由“加权验收得分”和“视觉质量得分”各占一半组成;缺少工程文件或评测失败的任务记零分。

这套设计将“需求完成了多少”和“整体观感如何”一起纳入评价,并为不同要求保留了对应的检查证据。

实验:综合分领先,全部要求通过仍不到一半

论文比较了 13 个参评系统,每个系统对每项任务运行一次。它们使用隔离的 Linux、GPU 和 Blender 环境;GPT-6-Astra、GPT-5.6-Sol 配合 Codex,其余系统配合 Claude Code。

参评模型
综合分
验收得分
视觉质量
全要求通过率
GPT-6-Astra
79.9
87.3
72.6
42.2%
Opus-5
73.0
80.9
65.1
25.6%
GPT-5.6-Sol
67.7
74.7
60.7
15.7%
DeepSeek-V4.1-Flash
65.7
72.0
59.4
11.7%
Qwen3.8-Max
60.6
65.9
55.3
10.3%
当DeepSeek开始3D建模,AI离独立交付还有多远?千问BlenderWorld给出了新回答图6

全要求通过率指通过该任务全部二元验收条件的任务占比。排名第一的 GPT-6-Astra 完成了 94 项完整验收;如果将门槛放宽到加权验收得分达到 90%,则有 143 项达到要求(总任务数为 223,占比 64.1%)。接近完成与逐项满足要求之间,仍有明显距离。

GPT-6-Astra 在展示的 9 类任务中领先 8 类,程序化与游戏资产、产品制造类得分较高;Opus-5 则在渲染与仿真类领先。模型的强项随任务类型变化。

论文还发现,更多工具调用没有直接对应更好结果:GPT-5.6-Sol 与 DeepSeek 在多模态任务上同为 65.5 分,平均工具调用却分别为 44 次和 168 次。由于框架和调用策略同时存在差异,作用机制仍需进一步实验拆分。

(这里的 DeepSeek 成绩来自 10 月 16 日的论文,1017 更新后的表现尚待重测。)

分析:看过结果、自检通过,为什么仍会出错

失败轨迹比榜单更能解释当前的瓶颈。

一个任务要求制作有人检查大豆的三维场景,GPT-6-Astra 将照片中的人物裁出,贴到平面上。提交视角里人物存在,转到侧面便几乎消失。另一个强制透视任务中,GPT-5.6-Sol 精确检查了鞋尖与远处塔楼的投影对齐,却遗漏人体接地,最后人物仍悬在草地上方。

最有代表性的是 Opus-5 的尺寸自检。需求规定木腿长 150 毫米,并配黄铜脚轮;智能体在计划中将其改成“包含脚轮在内总高 150 毫米”,于是制作了 102 毫米木腿和 48 毫米脚轮,再测量组合总高,报告通过。外部验收单独检查木腿,发现它比要求短了 32%。

当DeepSeek开始3D建模,AI离独立交付还有多远?千问BlenderWorld给出了新回答图7
图 3:三个失败轨迹分别暴露了视角依赖的平面人物、遗漏接地约束,以及自检过程中发生的规格偏移。

这些案例显示,智能体已经能够执行检查,但检查对象、测量目标和需求理解仍可能偏移。增加观看和验证动作,并不会自动补齐正确的三维约束。

验证与展望:裁判可靠性、评分稳定性与后续方向

论文包含裁判验证和评分权重敏感性分析。作者抽取 150 组作品对,请三位人工评审比较;在形成多数判断的 147 组中,主裁判 GPT-5.6-terra 与人工结果一致率为 82.99% 。在分差较小的 70 组作品中,一致率降至 68.57% ,相近作品的区分更困难。

作者还将验收得分权重从 0 调到 1,比较五种设置。除 Grok-4.6 与 Opus-4.8 的第七、第八名互换外,排序保持稳定。这项分析检验的是评分配方的敏感程度。

在后续实验中,作者计划比较同一模型在不同推理设置或智能体框架下的表现,记录资源预算、词元用量、延迟、工具调用与成本,并通过重复运行估计结果波动和排名稳定性。

任务与评测方面,作者计划增加局部修改、网格修复、拓扑处理,以及对已交付工程的再次修改;引入工程图、尺寸公差和几何约束检查,并邀请专业三维艺术家校准验收标准。

参考资料
[1] 

DeepSeek-V4.1-Flash-1017 官方介绍: https://api-docs.deepseek.com/zh-cn/news/news261017/

[2] 

3D-GPT: https://arxiv.org/abs/2310.12945

[3] 

BlenderGym: https://blendergym.github.io/

[4] 

neuralCAD-Edit: https://arxiv.org/abs/2604.16170


> 本文由 AI 生成,机智流编辑部校对


-- 完 --


加入机智流 Pro,1 天一块钱,AI 能力指数级增长时代,不掉队。机智流 AI 团队将燃烧远超人类的智能的 AI Tokens 驱动 AI Agents 军团带来「与你有关」「对你有用」的高质量资讯/研报。


机智流推荐阅读:

1. ‍

2. 

3. 

4. 

关注机智流并加入 AI 技术交流群,不仅能和来自大厂名校的 AI 开发者、爱好者一起进行技术交流,同时还有与、、、、等。
在「机智流」公众号后台回复下方标红内容即可加入对应群聊:
  • cc | 大模型技术交流群
  • hf | HuggingFace 高赞论文分享群
  • lc|LangChain 技术交流群
  • code | AI Coding 交流群
  • 具身 | 具身智能交流群
  • 硬件 | AI 硬件交流群
  • 推理 | AI 推理框架交流群
  • 智能体 | Agent 技术交流群

关于科技区角:国内科技展会垂直内容策划服务商,提供从论坛内容全案策划、会展市场化IP打造到精准专业观众一站式邀约服务,以产业内容吸引高质量B端人群,打通展会从议题设计、演讲嘉宾邀约、宣传预热、精准邀观到供需对接全链路。
声明:内容取材于网络,仅代表作者观点,如有内容违规问题,请联系处理。
AI
more
印度多家AI代理在测试中“误入”企业内网,暴露数据泄露隐患
李飞飞看了要点赞:15分钟,一台相机,把真实世界搬进了AI
NVIDIA 与半导体领军企业携手推进 AI 在芯片设计与制造领域的应用,助力实现 AI 定义的晶圆厂
Elorian发布“视觉草稿纸”模型Glimpse:让AI学会像人一样“眯眼细看”
AI正在重写EDA:当设计生成越来越容易,验证反而更重要!
登顶RoboDojo、超过GPT-6 Astra:Manifold AI推出R²SI
库克卸任后首访华:在苏河湾对话白重恩,直言中国拥抱AI的乐观精神令人触动
OpenAI再挖角SpaceX高管,商业化加速布局引关注
56年没解开的题,AI全解了!谷歌DeepMind新成果登上Science主刊
Anthropic实验揭示边缘AI潜在风险:设备集群或成失控载体
Copyright © 2025-成都区角科技有限公司
蜀ICP备2025143415号-1
  
川公网安备51015602001305号