当前位置:   article > 正文

基于NeRF的APP上架苹果商店!照片转3D只需一部手机,网友们玩疯了

苹果激光雷达3d建模软件
萧箫 发自 凹非寺
量子位 | 公众号 QbitAI

只用一部手机,现实中的2D照片就能渲染出3D模型?

没错,无需再手动上传电脑或安装激光雷达,苹果手机自带APP就能生成3D模型。

这个名叫Luma AI的“NeRF APP”,正式上架App Store后爆火:

d6b6efb6430f5319056a33d22ab24eb4.gif

小如3D装饰模型,兼具灯光和形状细节:

f01e147a71d5719a52c9351df6586f0b.gif

大到整个墓园的3D场景渲染版,都能被很好捕捉:

0b7cb896bfd24a56c4c44319fb9386a8.gif

这样无论是风景、3D物体还是人物,都可以被很好地保存进手机,并快速生成对应的3D模型。

所以这个APP究竟包含什么功能,它又具体要如何使用?

NeRF手机APP是什么?

Luma AI是一个基于NeRF打造的APP,目前能在苹果商店中搜到:

975bc734a9ff59deb30fd1a14a5bebc9.png

NeRF是少量2D照片生成3D场景的经典AI模型,最初版本由UC伯克利和谷歌开发,只需要输入少量静态图片,就能做到多视角的逼真3D效果。

最初NeRF需要专业相机拍几百张照片,并在拍照时严格遵守参数坐标,但由于它的代码数据开源,目前已经有不少简化版模型被开发出来。

不仅照片数量有所下降,从几百张到几十张甚至几张,对拍照位置和照相机的要求也有所降低。

但能直接通过APP导引、随时随地可用的NeRF,几乎还没出现过。

现在,Luma AI团队基于云服务器,实现了这个可以实时渲染3D物体、产品风景和场景的APP。

be67adc21fb067732271ddef1b8cd6db.gif

它包含自动调整焦距、视角画面比例调整等不同功能,捕捉到的3D场景则包含复杂形状、反射和照明等细节。

同时,制作得到的3D模型既可以直接分享到网上,比2D照片更全方位地展示细节:

f8556647ba59041f39ff1759b4c3f4c9.gif

也可以放进Blender等游戏引擎中,让它“动起来”:

cec3fde05d83feb622f6d680d86bf8f1.gif

现在,你也可以试一试了。

支持iPhone 11或以上机型

目前Luma AI支持iPhone 11或以上的机型,操作方法也很简单。

在苹果商店下载APP后,只需要跟着导引,围绕3D物体一步步完成拍摄,NeRF就能在后台将这些照片合成出一个3D模型,并实时导出:

e8b8ed26d36f7e004e339744e0217f2a.gif

支持的玩法也很多样,从调整焦距、效果预览都包括:

85bb80481d3293c88948d83b41cb908a.png

实际拍出来的效果,可以直接放进电影中,有运镜内味了:

10fd6d184222251254bcd7d947f2a8b6.gif

所以,没有苹果手机怎么办?

网页端上传照片也可以,视频和照片集二选一:

cacec4a69379d6df8b8b1642e7b37f68.png

在Luma AI公开的3D模型分享库中,已经有不少网友上传了自己随手拍的3D模型:

22ec318bebd704397095b4ced5547dc7.png

目前支持导出的3D模型格式,主要包括obj和gltf两种。

你想好用它来拍出大片效果、做游戏模型,还是把家里的3D手办“电子化”了吗?

参考链接:
[1]https://twitter.com/LumaLabsAI/status/1611466398546690048
[2]https://captures.lumalabs.ai/imagine
[3]https://apps.apple.com/us/app/luma-ai/id1615849914

「人工智能」、「智能汽车」微信社群邀你加入!

欢迎关注人工智能、智能汽车的小伙伴们加入交流群,与AI从业者交流、切磋,不错过最新行业发展&技术进展。

PS. 加好友请务必备注您的姓名-公司-职位噢 ~

4220754ad95297595aabeffbe717ea88.jpeg

点这里 本文内容由网友自发贡献,转载请注明出处:【wpsshop博客】

推荐阅读
相关标签