桃子桃子快讯
返回首页
研究论文

arXiv 研究:7 款基础模型自动生成 CAD 能力横评

论文提出 LLMForge 框架,在 97 道工程设计题上对比 DeepSeek、Qwen、Llama 等 7 款模型,…

2026.07.08 · 周三3 分钟阅读

arXiv 上一篇题为《Foundation Models for Automatic CAD Generation》的章节论文,围绕「大语言模型与视觉语言模型能否直接从自然语言生成可参数化的三维 CAD 模型」这一议题展开实证研究。作者构建了一个统一的评测流水线,并整理了包含 97 道工程设计题的自建基准,对 7 款主流基础模型在机械零件 CAD 自动生成任务上的表现进行了系统比较。

研究动机与背景

随着大语言模型(LLM)与视觉语言模型(VLM)能力的提升,从自然语言规格直接生成参数化三维设计成为可能。该研究聚焦于机械 CAD 这一相对垂直的场景,作者认为既有工作多为单模型演示,缺少统一基准和跨模型对比,难以判断不同基础模型在该任务上的真实水平差。

LLMForge 框架设计

论文提出了一个名为 LLMForge 的多模型 text-to-CAD 框架,核心组件包括:

  • JSON Schema 校验:约束模型输出的结构合法性。
  • 解析式特征评分:对几何参数进行规则化打分。
  • 网格合成:将参数化描述转换为三角网格。
  • 多轮迭代优化:在生成与反馈之间循环。

框架设计了两套反馈机制用于多轮迭代:

  • IterTracer:使用基于 Phong 着色的光线追踪渲染器,从轮廓 IoU、孔洞可见性、边距、宽高比合规性等解析视觉指标给出轻量反馈。
  • IterVision:用 Qwen2.5-VL-72B 作为 VLM 语义评判器,对渲染视图进行思维链式视觉推理,关注空间一致性与设计意图。

基准与受测模型

基准覆盖四类典型几何族:带孔与螺栓圆孔的板件、多特征箱体、法兰圆柱、L 型支架。作者评估了 7 款基础模型:DeepSeek-V3.2、Qwen3-235B-A22B、Llama-3.3-70B、Gemma-3-27B、GLM-4.5、MiniMax-M2.1、INTELLECT。

关键实验结果

  • 在 IterTracer 反馈下,排名前四的模型构成紧密簇,总分均值落在 0.885 至 0.890 区间,网格合成成功率达 98.97%。论文指出,紧凑的指令微调模型在该任务上可与显著更大的系统持平。
  • 切换到 IterVision 的 VLM 语义评判后,头部模型实现了 100% 的水密网格生成;但在圆柱等旋转对称几何上,视觉评分与语义评分出现明显分歧,暴露出 VLM 对该类几何的理解仍有系统困难。

讨论与局限

论文进一步讨论了基准设计、典型失败模式、面向 CAD 的提示工程策略,以及对工业工作流与可扩展自动化机械设计的含义。作为一项初步实证工作,其结论受限于自建基准的规模(97 题)与几何族覆盖范围,模型在复杂装配、曲面细节和工程约束上的表现仍待进一步验证。

信源