一部手机就能玩出这种特效,难怪3D建模大神都点赞

智能机器能不能 2024-05-10 10:50:50

机器之能报道

编辑:Sia

手机做的特效,居然也能骗过我的眼睛。

这是一组让人怀疑双眼和大脑的视频,我打赌很多人很难分辨哪些东西是假的......

视频链接:https://mp.weixin.qq.com/s/ZSTkk_qyqNzMESPYX_8T6A

桌子上一堆东西,哪些是真实的物理存在,哪些是添加的 3D 模型?机器人跑酷时,手足与长凳交互的方式近乎无缝甚至还有熟悉的机械声(记得打开音量),是不是感觉很逼真?

就连日本 3D 建模大神 Hirokazu Yokohara 也加入了体验行列。她只花了几分钟就将一个四足机器人模型植入到真实场景中。

来自@Yokohara_h

视频链接:https://mp.weixin.qq.com/s/ZSTkk_qyqNzMESPYX_8T6A

所有这些视频都是在苹果手机上创作完成的(你相信吗?)。通过一个叫 Simulon 的苹果手机应用(视觉特效工具),非专业玩家也能创建和渲染这样的视频,只需几分钟!比如这个:

视频链接:https://mp.weixin.qq.com/s/ZSTkk_qyqNzMESPYX_8T6A

这段视频的渲染过程只用了 10 分钟:

来自X网友@DonAllenIII,用手机拍摄实景用了5分钟,渲染用了10分钟。声音和后期编辑使用了其他应用。

视频链接:https://mp.weixin.qq.com/s/ZSTkk_qyqNzMESPYX_8T6A

“Blender(一种 3D 建模工具——编者注)中的光照和渲染设置是自动的,所以,我只需从 iPhone 发送图像并按下渲染按钮即可。如你所见,质量并不完美,但这种应用程序很热门,” Hirokazu 评论道。

去年年底,Simulon 就放出一些 demo 视频,让人们看到了将移动技术与高质量视觉特效相结合的可能。今年 4 月,开发团队向选定的一组人提供了 Simulon 的测试版,于是就有了这些精彩视频。坊间推测这款应用很有可能在明年年初对广大公众开放。

记得《猩球崛起》里的凯撒吗?它也去逛了一趟自然历史博物馆。来自X网友@elsableda

来自X网友@@XRarchitect

视频链接:https://mp.weixin.qq.com/s/ZSTkk_qyqNzMESPYX_8T6A

Simulon 的工作原理并不复杂。3D 模型需要你事先准备好(主流的原生 3D 资产都支持,比如 blender、glb、usdz ),然后打开应用,拍摄实景。

Simulon 会利用手机摄像头实时追踪场景中的物体和环境,生成深度信息、光照信息等后续渲染所需数据。拍完实景后,上传 3D 模型,设置照明、阴影和反射效果等内容。

渲染工作是在云端完成。服务器会根据上传的场景数据和 3D 资产(如恐龙、机器人等)等内容,使用专门软件和算法进行渲染。强大的计算资源可以处理复杂的视觉效果,如动态阴影、反射、折射等,这些效果在本地设备上难以实时实现。

完成后,用户就可以从云端下载高分辨率的视频了。

Simulon创始人兼CEO Divesh Naidoo解释工具的运作原理。

Simulon 核心技术之一在于设计了一种独特的照明系统——利用机器学习算法将用户手机拍摄的低动态范围( LDR )画面直接转化成一个 360 度的高动态范围( HDRI )图像。所谓“高动态范围”是指在影像或影片中,最亮部分和最暗部分的光度差异很大。这就像给你的苹果手机内置了一台虚拟摄像头,自动同步、模拟物理摄像头对光线的反应,生成高动态范围图像。

独特照明系统的工作原理

视频链接:https://mp.weixin.qq.com/s/ZSTkk_qyqNzMESPYX_8T6A

事实证明,把握住复杂的光影艺术就能赋予虚拟资产难以置信的真实感。你看这个琥珀,不断改变手机观察角度,光线明暗也随之变化:

视频链接:https://mp.weixin.qq.com/s/ZSTkk_qyqNzMESPYX_8T6A

你甚至可以在这个视频里看到蓝色球体反射到地面上的微微蓝光,就像它们真在那里一样。

来自X网友@@XRarchitect

一台机甲漫步在树木林立的小路上,时而经过树荫,时而又有阳光直射在身上。首先,作者在 3D 建模工具 Blender 中,通过放置光栅( light gobos )来模拟树叶在机甲上投下的阴影效果,并使用亮度遮罩来确保机甲的阴影不会与实际地面的阴影重叠。然后,才将机甲模型放到 Simulon 进行渲染(还支持声效哦), 达到更逼真的视觉效果。

来自 Divesh Naidoo

视频链接:https://mp.weixin.qq.com/s/ZSTkk_qyqNzMESPYX_8T6A

顺便提一句,Simulon 是一家南非的初创公司,创始人兼 CEO Divesh Naidoo 在 VR/AR 领域工作多年,为 MTV、KFC、梅赛德斯 - 奔驰和 BBC 等知名公司提供过服务。他在 2019 年创建了 Simulon,希望将好莱坞制片厂的能力交到拥有消费级硬件的独立创作者手中。

他在接受采访时曾提到,Simulon 不仅仅是为了专业视觉效果艺术家设计的,而是为了那些有创意但可能没有 3D 技能的人设计的。他为这款产品设想了一个潜在的 3D 资产市场,用户可以在其中购买或下载艺术家创建的资产,并在现实世界中使用这些资产创作内容。

这里是申请内测的传送门:

https://simulon.typeform.com/betatest?typeform-source=t.co

0 阅读:0

智能机器能不能

简介:感谢大家的关注