首页 科技正文

Google 提出多叠重现的沉浸光场影片格式 46 组相机完整记录 3D 影像 压缩后还可串流至手机等装置 (154959)

Google 提出多叠重现的沉浸光场影片格式 46 组相机完整记录 3D 影像 压缩后还可串流至手机等装置
Google 提出多叠重现的沉浸光场影片格式 46 组相机完整记录 3D 影像 压缩后还可串流至手机等装置

Google以多叠重现的沉浸光场影片格式,透过46组相机设备捕捉光场影像资讯,并且透过机器学习等软体技术重建可对应6自由度 (6DoF)观看的立体影像,能保留真实影像视觉感受内容,例如在不同视角下的远近感,以及行进间的视差感受,另外在光影折射表现也能完整还原。

借此推动更多元的虚拟视觉应用

虽然去年宣布终止以多组摄影机拍摄360度环景影像的JUMP计画,但显然Google并未放弃拍摄立体影像的技术发展。在SIGGRAPH 2020所释出技术白皮书内,Google提出以多叠重现的沉浸光场影片格式 (Immersive Light Field Video with a Layered Mesh Representation),透过46组相机设备捕捉光场影像资讯,并且透过机器学习等软体技术重建可对应6自由度 (6DoF)观看的立体影像。

由于采用光场影像记录,因此将能保留真实影像视觉感受内容,例如在不同视角下的远近感,以及行进间的视差感受,另外在光影折射表现也能完整还原。

整部拍摄装置除了以46组相机设备构成,并且以每组相机间隔18公分形式构成直径92公分的20面半球体,记录视角则可达220度以上。而在拍摄过程中,将会进行影像压缩及后续渲染处理,其中以DeepView类神经网路学习方式让影像拼接变得更自然、正确。

最后生成的多球状影像 (MSI,Multi-sphere image),将会以100张以上的高解析度RGBA (RGB+Alpha)影像组成单一画格内容,并且透过Layered Mesh (LM)格式压缩,使最终生成影像能对应串流播放使用需求,借此能串流至手机上播放观看。

同时,因为压缩后的档案占比相当小,因此可借由串流形式传送到手机、网页,或是头戴装置上观看,借此推动更广泛的虚拟视觉应用。

[embedded content]


转载说明:本文转载自 互联网,如有侵犯你的利益,请发邮件至本站邮箱,本站24小时内将予删除。
硬科技:集AMD技术之大成的超级电脑APU:EHP (下) #gpu (154977)

既然AMD看起来决定打造「超高阶APU」,那想必各位科科头上马上浮现一个大大的问号:这东西要拿来作什么?又准备要卖给谁? 前情提要:集AMD技术之大成的超级电脑APU:EHP (上) 以今年6月的Top 500榜单来说,相较于满山满谷的Intel CPU和NVIDIA GPU,用到AMD CPU的只有「10台」,而GPU就更尴尬了,才区区「1台」装了Radeon Vega。要不是因Zen 2世代的EPYC吸引了不少超级电脑新案,像突破2ExaFlops的美国国家核能安全管理局的El Capitan等等,堂堂AMD在Top 500只占有如此零头的份额,怎么说也说不过去。 AMD将其定位为「Exascale」,当然不是区区1颗超级暴力的APU就可搞定(否则全世界所有超级电脑设计者大概都要跳楼了),而是众志成城,预计在2022到2023年,用10万颗EHP与20MW的耗电量,实现Peta等级的1000倍效

版权声明

本文仅代表作者观点,
不代表本站Allbet Gaming的立场。
本文系作者授权发表,未经许可,不得转载。

评论