← 研究

论文解读 · 2026年10月7日

LMBuild:评估 LLM 智能体构建可实际组装且能运作的结构

LMBuild: Evaluating LLM Agents for Generating Buildable and Functional Structures

智能体数据与评测机器人与具身智能 中级 点赞 31 cs.AI University of Illinois at Urbana-Champaign

构建了涵盖部件、关节、材料乃至组装顺序的结构构建交互环境和四层评估体系,并评估了 30 个系统,结果确认功能和物理可运作性是最大的短板。

问题

LLM 智能体已能构建复杂的 3D 结构,但现有评估集中在几何与视觉质量以及语义对齐上。能否实际组装、能否实现预期功能、能否在物理世界中制造,尚未得到系统评估。

方法

提供三项内容。① 交互环境:智能体通过工具检索或新建部件,进行放置和修改,并指定关节、材料和组装顺序。② 基准:从约 36.8 万个现有 3D/CAD 数据(BrickNet、PartNeXt、Fusion 360 Gallery、Artiverse、27 个开源硬件项目等)中选取 2,549 个构成 Full 集,并从中选定 200 个作为 Core 集。每个对象都利用维基百科知识补充了功能部件和运动学信息。③ 评估:以 0~100 分制对结构健全性(S)、功能可供性(A)、设计质量(D)、物理实现(R)4 个维度和 12 个细分指标打分。还评估仅检索、仅生成、多轮修改、详细描述提示词等变体设置。

结果

局限

出于成本原因,所有实验仅在 200 个 Core 集上进行。评估对象限制为每个对象类别最多一个。只输出几何的领域专用系统通过 Particulate 估计关节信息后再评估,可能与其原本能力存在差异。功能和运动学标准依赖从维基百科补充的文本知识,可运作性基于仿真评估。

意义

将 3D 生成评估从“好看的形状”扩展到“可制造且能运作的物体”。以数据表明功能推理和新部件设计是下一个瓶颈,可作为设计与制造自动化智能体发展方向的参考基准。

关键术语

功能可供性(functional affordance)
指物体是否具备实现预期功能所需的部件、关节和运动。
运动学(kinematics)
研究由关节连接的部件在什么方向和范围内运动的概念。
部件检索 vs 生成
从给定部件池中挑选合适部件的方式,以及由智能体直接新建所需形状部件的方式。

原文

作者: Jiateng Liu, Rushi Wang, Cheng Qian, Xuejun Zhang, Sun Li, Jiayu Liu, Yifan Shen, Xu Cao, 等 · 发布 2026-10-03 · 许可 arXiv 비독점 배포 라이선스 · 基于全文分析

本解读是 AI 阅读论文后撰写的摘要,请以论文原文为准。