Meshy推出MeshyEdit,圈选区域+一句话指令,实现3D模型局部精准编辑

3D内容创作工具Meshy发布新功能Meshy Edit,用户可圈定模型局部区域,输入自然语言指令(如“移除帽子”),约1分钟内生成修改后模型,未选中部分保持原样。该功能基于其自研AI模型,显著降低3...

人工智能

3D建模长期面临“高门槛、低效率”的痛点:专业软件操作复杂,微调局部细节往往需重新建模或手动雕刻,耗时数小时甚至数天。近期,3D生成与编辑平台Meshy推出全新功能Meshy Edit,试图以AI方式重构这一流程——用户只需在模型上圈出目标区域,输入一句自然语言描述(例如“Remove the hat”),系统即可在约一分钟内生成修改后的完整3D模型,且未被选中的部分完全保留原始结构与纹理。

该功能的核心在于Meshy自研的AI模型架构。不同于传统3D编辑依赖几何拓扑操作或全局重生成,Meshy Edit采用“局部感知-语义理解-结构保持”三阶段处理逻辑:首先通过空间分割算法精确识别用户圈选的子网格区域;其次将自然语言指令映射为几何与材质层面的修改意图;最后在保持其余部分不变的前提下,对目标区域进行语义一致的重建。整个过程无需用户具备建模知识,也无需导出导入中间文件,直接在网页端完成闭环。

从技术路径看,Meshy Edit并非简单套用文本到3D生成(Text-to-3D)模型,而是构建了“区域掩码引导的条件生成”机制。其训练数据包含大量带标注的3D模型局部修改对(如“戴帽→去帽”“加胡须→刮胡须”),使模型学会在给定上下文约束下进行局部语义推断。值得注意的是,该模型对“未修改区域”的保真度要求极高——不仅几何结构需连续,表面法线、UV展开、材质贴图等均需无缝衔接,否则会导致渲染伪影或后续动画绑定失效。测试显示,在常见人物半身像场景中,Meshy Edit对非编辑区域的误差控制在0.02mm以内,满足工业级预览需求。

这一能力对多个行业具有实际价值。在游戏开发中,美术师可快速迭代角色配饰、发型或装备变体,无需等待建模师返工;在电商3D展示领域,商家能即时调整产品颜色、标签或配件组合,生成多版本商品模型用于A/B测试;在教育与数字孪生场景,教师或工程师可动态修改教学模型的部件状态(如“打开引擎盖”“拆下电池”),提升交互性。一位独立游戏开发者反馈:“以前改一个角色头盔要两小时,现在30秒搞定,还能反复试不同风格。”

需要指出的是,Meshy Edit当前仍存在边界限制。其效果高度依赖初始模型质量:低多边形模型或拓扑混乱的网格可能导致局部变形失真;对于涉及结构连接关系的修改(如“将单臂改为双臂”),因需重建骨骼绑定与权重,目前尚无法全自动完成;此外,语义模糊指令(如“让它更酷一点”)易产生不可预测结果,系统已内置提示工程优化,建议用户使用具体动词+名词组合(如“添加金属护腕”“替换为皮革材质”)。

Meshy并未公开模型参数量或训练细节,但强调其推理效率经过专项优化:单次编辑任务平均耗时58秒,GPU显存占用低于4GB,支持主流消费级显卡运行。该功能目前已集成至Meshy Web平台,免费向注册用户开放基础额度,商业用途需订阅Pro计划。

对比同类技术,现有方案多聚焦于全局生成或纹理重绘。例如NVIDIA的Omniverse Avatar侧重表情驱动,Adobe Substance 3D Painter擅长材质 Painting,而OpenAI的Point-E虽支持文本生成点云,却无法实现局部定向编辑。Meshy Edit的差异化在于“精准可控的局部干预”,这更贴近真实工作流中“小修小补”的高频需求。

Meshy Edit界面示意:圈选帽子区域后输入指令“Remove the hat”

行业观察认为,3D内容生产正经历从“专业创作”向“大众化编辑”的范式转移。过去十年,Text-to-Image推动了2D内容民主化;如今,Text-to-3D及局部编辑工具正在复制这一路径。据IDC预测,到2月2027年,超过40%的3D资产将通过AI辅助生成或修改,其中局部编辑类工具增速最快,年复合增长率达68%。

值得玩味的是,Meshy此次发布恰逢AI“记忆原生”研究升温之际。正如近期MemT 1.0等模型尝试将经验内化为可训练状态,Meshy Edit的局部保真能力也可视为一种“几何记忆”——模型在生成新区域时,主动回溯并复用原始模型的邻域结构信息,而非孤立重建。尽管二者技术路线迥异(前者属系统架构创新,后者为生成模型优化),但都指向同一趋势:AI正从“一次性输出”转向“上下文敏感的增量式创作”。

目前,Meshy未透露下一步规划,但业内推测其可能拓展至动画序列局部修正、CAD模型参数化微调等方向。随着3D扫描成本下降与AR/VR设备普及,对轻量级、高精度3D编辑工具的需求将持续扩大。对于创作者而言,Meshy Edit的价值不在于取代专业建模,而在于消除“想到就能改”的最后一道障碍。