MIDI-3D(Multi-Instance Diffusion for Single Image to 3D Scene Generation)是一种高效的 3D 场景生成技术,能够从单张图像快速生成高保真 3D 场景。该方法利用智能分割技术识别图像中的独立元素,并通过多实例扩散模型结合注意力机制,实现 360 度全方位 3D 场景重建。

注意:目前仅支持生成白模,无贴图

开源地址:https://github.com/VAST-AI-Research/MIDI-3D

☞☞☞☞☞☞  一键启动包在右侧下载  ☞☞☞☞☞☞

 

配置要求:

电脑满足以下配置:

  • 操作系统:Windows 10/11 64位
  • 内存:16G以上
  • 显卡:至少12G及以上显存的英伟达(NVIDIA)显卡
  • CUDA:显卡支持的CUDA版本大于等于12.4版本(如不知道显卡支持的CUDA版本,可点击此链接查看:https://aiyy.info/supported-cuda-versions/
  • 整个包解压完约14.8G,要留足硬盘空间

 

如何查看显卡品牌型号和显存:

  • 打开任务管理器
  • 点击“性能”
  • 点击“GPU”
  • 右上角可以看到显卡型号,下方可以看到显存大小

 

使用教程:

① 打开下载页面(https://aiyy.info/midi-3d/)点击页面右侧下载按钮,下载整合包之后解压,建议使用winrar解压(解压软件在文件包中,或者可以自己下载安装,下载地址:https://www.winrar.com.cn/

不要用Windows自带解压!!不要用360解压!!

注意:文件夹路径和文件名称(包括音频、图片、视频等文件名称)不要出现中文字符,否则部分软件会因识别不出而报错

② 双击“一键启动.bat”,稍等片刻会在浏览器中自动打开操作界面

③ 操作界面有中文版操作步骤指南,按照步骤操作即可

首先上传图像

然后按住鼠标左键,拖动鼠标框选出需要建模的物体,选好之后点击“运行分割”

(注意框选的物体越多,建模时间越长,对显存要求也就越高)

查看分割后的结果,没问题就点击“运行生成”

生成结果位于右侧,点击“下载GLB”即可将GLB文件保存至指定文件夹

注意:目前仅支持生成白模,无贴图

在文件包中的“tmp”文件夹中也能找到生成结果

 

声明: ① 本站所有资源版权均属于原作者所有,这里所提供资源均只能用于参考学习用,请勿直接商用。若由于商用引起版权纠纷,一切责任均由使用者承担。更多说明请参考赞助计划。 ② 本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。