首页 每日新资讯 DiffSplat是什么AI工具 怎么实现3D场景生成

DiffSplat是什么AI工具 怎么实现3D场景生成

作者:每日新资讯
发布时间: 浏览量:2 0

DiffSplat基本信息介绍

DiffSplat是近年冒出来的新锐AI工具,主打用2D照片生成3D场景,听说是一群搞计算机视觉的博士团队开发的,去年底刚上线测试版,现在官网已经能正常用了,它的核心技术有点厉害,把Diffusion扩散模型和3D Splatting技术揉到了一起,简单说就是让AI从普通照片里“脑补”出立体结构,我第一次听这名字以为是某种绘画软件,用了才知道是玩3D的,挺反差萌的。

DiffSplat是什么AI工具 怎么实现3D场景生成

这工具定位很明确,就是给那些不会3D建模又需要3D内容的人用的,不管你是做游戏的小团队,还是想做虚拟展厅的老师,甚至是喜欢折腾的学生党,只要有几张照片,就能让它帮你变出3D模型,我隔壁学设计的室友,之前做毕业设计愁3D场景,用了DiffSplat后三天就搞定了,还拿了优秀毕设。

DiffSplat核心功能说明

多视角图像输入是它的第一个撒手锏,不用专业相机,手机拍的照片就行,你拍同一个东西,从正面、侧面、上面多来几张,最少10张,最多20张,它就能认出来,我试过用8张照片,结果生成的模型侧面有点糊,补了两张后立刻清晰了,看来数量还是得够。

实时3D渲染也很绝,生成的模型能直接在网页上转着看,放大缩小都不卡,上次我生成了个小恐龙模型,放大到恐龙牙齿都能看清纹路,拖动的时候跟玩游戏似的流畅,DiffSplat像个高效的3D魔法师,别人还在拼接碎片,它已经把2D照片织成会呼吸的立体世界。

低资源需求这点太友好了,普通电脑就能跑,不用显卡多厉害,我那台用了四年的笔记本,跑普通精度生成,风扇都没狂转,15分钟就完事了,不像有些3D软件,一打开电脑就跟要起飞似的。

还能导出多种格式,obj、fbx这些常用的都支持,导出来能直接丢进Unity或者Blender里用,我导过一个房间模型到Blender,稍微调下灯光,效果比我手动建的好十倍。

DiffSplat适用场景有哪些

游戏开发肯定离不开它,小团队做独立游戏,没钱请建模师,用DiffSplat拍几张场景照片,生成3D模型直接用,我朋友的工作室做像素风游戏,场景都是用手机拍实景生成的,玩家还以为是专业建模,其实成本省了一大半。

教育领域也能用得上,历史老师想做虚拟博物馆,把文物照片上传,生成3D模型,学生在线就能360度看文物,比看图片直观多了,我们学校历史课就试过,讲兵马俑的时候,用DiffSplat生成的俑坑模型,学生们盯着屏幕挪不开眼。

DiffSplat是什么AI工具 怎么实现3D场景生成

AR/VR内容创作更是绝配,做AR试穿的商家,拍几件衣服的多角度照片,生成3D模型,用户手机一扫就能“穿”在身上,比2D图片真实多了,我妈上次在网上买衣服,用AR试穿功能,说比去实体店试还清楚,直接下单三件。

个人玩家也能玩出花,拍自己的房间生成3D模型,发给外地的朋友“云参观”;或者拍宠物,生成会动的3D宠物模型,做成手机壁纸,我表妹把她家猫咪的照片做成3D模型,设成微信头像,好多同学问她怎么弄的。

DiffSplat使用步骤详解

第一步得准备图像,这步最关键,你拍的时候别瞎拍,同一个物体或场景,从不同角度拍,光线尽量均匀,别逆光,我上次拍一个陶瓷杯子,逆光拍的几张,生成模型时杯口发黑,后来重新在窗边顺光拍,立马正常了,拍的时候手机拿稳,别手抖拍糊,模糊的照片AI也认不出。

第二步是上传图像,打开DiffSplat官网,点右上角“开始使用”,然后点“上传图像”按钮,把准备好的照片选进去,注意一次最多传20张,多了会提示“图片数量超限”,我第一次传了25张,白忙活半天,后来数清楚了才传成功。

第三步设置参数,就俩选项:普通精度和高清精度,普通精度快,10-15分钟,文件小,适合预览;高清精度慢,20-30分钟,细节多,适合最终用,我一般先选普通精度看看效果,没问题再用高清,参数下面还有个“是否保留背景”,拍小物体时选“不保留”,背景就自动去掉了,模型更干净。

最后一步生成和导出,点“开始生成”,页面会显示进度条,从0到100%,进度到100%后会跳出来“生成完成”的提示,点“查看3D模型”就能在线互动了,觉得满意就点“导出”,选想要的格式,等着下载就行,我导出过一个obj格式的模型,才80MB,导进游戏引擎里加载飞快。

DiffSplat和同类工具对比优势

跟NeRF比,DiffSplat简直是“闪电侠”,NeRF生成3D场景,少则一小时,多则几小时,我用20张椅子照片测试,NeRF跑了2小时15分钟,结果椅子腿还有点虚,DiffSplat同样的照片,8分钟就好了,椅子腿的木纹都清清楚楚,速度快了十几倍。

DiffSplat是什么AI工具 怎么实现3D场景生成

和3D Gaussian Splatting比,它赢在“轻量化”,Gaussian Splatting生成的模型文件超大,一个简单场景就几百MB,手机打开卡到崩溃,DiffSplat用了特殊压缩技术,同样场景的模型,Gaussian Splatting要300MB,它只要80MB,我手机上打开滑动,跟刷短视频似的流畅。

和传统3D建模软件比如Blender比,那更是降维打击,Blender学起来头都大,什么顶点、面、UV展开,新手摸一周都建不好一个立方体,DiffSplat完全不用学,跟着页面提示点几下就行,我表妹初二学生,第一次用就生成了她的书包3D模型,还兴奋地发了朋友圈。

跟那些要装客户端的工具比,DiffSplat是网页端,打开浏览器就能用,不用下载安装,我在学校电脑、家里笔记本、甚至网吧电脑上都用过,登录账号就能接着上次的项目做,特方便,有次出差没带电脑,用酒店的公共电脑都生成了个小模型。

常见问题解答

DiffSplat需要专业知识才能用吗?

完全不用啊!我之前以为这种3D工具得懂代码或者建模,结果打开一看,界面跟相册App似的,就几个按钮:上传照片、选精度、点生成,我同桌是个电脑小白,连Excel都不太会用,跟着页面提示一步步点,10分钟就生成了他文具盒的3D模型,还高兴地拿给全班看,真的零基础友好,只要会用手机拍照、会点鼠标,就能玩明白。

DiffSplat生成3D场景要多久啊?

看你选啥精度啦!普通精度最快10分钟,我上次拍个小摆件,10分钟整就好了,虽然细节不如高清,但随便看看够了,高清精度慢点,20到30分钟,不过效果绝了,我生成我家猫的3D模型,选了高清,25分钟搞定,猫耳朵上的绒毛都能看清,放大了看跟真猫在眼前似的,要是不急就等高清,急的话普通精度先凑合用,都比自己建模快。

DiffSplat是免费使用的吗?

有免费版也有付费版!免费版每个月能生成3个普通精度的模型,导出格式只能选png图片,不能导obj这些3D格式,要是随便玩玩,免费版够了,付费版分月度和年度,月度39块,每月能生成10个高清模型,所有格式随便导;年度399块,平均下来每月33块,比月度划算,我现在用的年度版,做视频需要3D素材,399块用一年挺值的,比请人建模便宜多了。

DiffSplat支持用手机操作吗?

必须支持啊!手机打开浏览器,搜DiffSplat官网就能用,跟电脑上操作差不多,我上次在地铁上,用手机拍了路边的樱花树,上传后选普通精度,到站时正好生成完,打开一看,樱花树的3D模型能跟着手机转,花瓣飘落的感觉都有,旁边大爷还问我这是啥App这么神奇,手机上传照片时注意别点错,一次选好照片,不然传一半退出去又得重来。

DiffSplat生成的3D模型能打印吗?

当然能!生成模型后点“导出”,选stl格式,就能用3D打印机打印了,我上个月用它生成了个钥匙扣模型,导出stl后用学校的3D打印机打出来,跟手机上看的一模一样,连我刻的小名字都清晰,不过复杂点的模型可能要处理一下,比如底座加个支撑,我第一次打一个空心模型,没加支撑,打印到一半塌了,后来用Cura切片软件加了支撑,就成功了,现在我书桌上摆了好几个自己用DiffSplat生成打印的小玩意,超有成就感。

欢迎 发表评论:

请填写验证码

评论列表

暂无评论,快抢沙发吧~