麻省理工工程师开发AI驱动CAD系统：像人类设计师一样操作软件

MIT工程师正在开发一种AI模型，能以人类设计师的方式操作CAD软件。这款系统接收2D草图后，通过在软件内点击按钮、导航菜单，将其转化为3D模型。

该项目旨在降低CAD陡峭的学习曲线，让设计工作更高效、更易上手。

团队创建了名为VideoCAD的新数据集，包含41000多个示例，记录设计师在CAD工具中构建3D模型的全过程——每一次点击、拖动和选择操作都被捕捉。AI通过学习这些数据，掌握人类如何通过CAD界面创建零件和物体。

工程师们将此视为打造“CAD副驾驶”的路径：该系统可从草图生成3D设计，还能建议下一步操作或自动化重复任务。

“AI有机会提升工程师的生产力，同时让CAD对更多人开放，”MIT机械工程系研究生Ghadi Nehme表示。研究人员称，这能帮助初学者更快入门。

“这意义重大——它降低了设计的入门门槛，让没有多年CAD培训的人也能轻松创建3D模型，释放创造力，”MIT机械工程副教授Faez Ahmed补充道。

团队基于AI驱动用户界面代理的最新进展开展工作（这类代理已能操作电子表格或浏览器完成任务），但CAD需要更复杂的交互：工程师需选择精确工具、选区、缩放、调整角度，再执行形状操作。

为教AI掌握这些细节，团队先研究了现有人类设计CAD对象的数据集——每个设计包含“绘制直线”“拉伸”等高阶命令，但这些不够：真正的代理需理解指令背后的精确UI交互。

研究人员开发了一套系统，将高阶命令映射为真实屏幕操作。Nehme解释：“比如，从点1到点2画直线，我们把这个高阶动作转化为UI操作：选择‘直线’工具后，从第一个像素位置点击，移动到第二个像素位置再点击。”

这种映射生成了41000多个训练视频，每个视频实时记录完整建模序列的所有UI动作。团队随后用VideoCAD数据集训练模型。

训练完成后，AI可接收简单2D草图，直接操作CAD软件——通过点击、拖动、选工具，构建正确的3D形状。该系统适用于简单物体和复杂结构（如房屋布局），团队目前正用更难的设计优化模型。

行业专家认可其潜力：“VideoCAD是AI助手发展的宝贵第一步，能帮助新用户入门，自动化重复建模任务，”欧特克研究院高级研究科学家Mehdi Ataei说。他指出，未来系统可支持多CAD平台和更复杂的工作流程。