5月8日,量子视觉举办了分享会,与大家一同探讨VR内容的商业化之路到底如何走下去。在演讲中,张聪解释了相机采用20镜头、10K的意义,同时详细介绍了目前关于内容拼接存在一些问题和评定质量方法。
目前大家使用的VR相机大多是鱼眼相机拍摄的,它的优势是可以拍摄很大的fv、方便拼接、减少相机数量。这带来的缺陷就是视频边缘的分辨率比较低。而广角的就能保证整个视频的质量。
张聪表示,目前有两种方法可以用4k的解码芯片达到10k的效果:动态码流和动态区域,后者也是目前量子视觉采用的解决方案。
拼接质量的优劣主要看以下四个方面:是否存在缝隙;光线的过渡是否自然;3d不晕并且给人很强的沉浸感;清晰度。而拼接存在的主要问题包括内容的缺失、变形和重影。
以下是演讲实录,VRZINC整理有删减:
张聪:我们认为,VR市场最终会被几个大的公司统治。但是内容是一个会百花齐放百家争鸣的环节。目前无论是影视、游戏、旅游业等统一的特点就是缺少优质的内容。量子视觉助力优质内容的cp,帮助他们生产高质量的内容。我们举办这次大会就是为了帮助这些团队,让他们在制作内容的时候不会因为硬件、解决方案而制约他们的想法。这样是我觉得对VR行业最深层次的推动。
创业,最关键是解决别人的刚需。极大的降低成本、提高制作效率、提高用户的体验,这是量子视觉做解决方案时贯穿的三个主旨。
我们希望用户使用我们设备的时候可以降低足够多的成本,包括在设备、人工、后期剪辑等。当前很多设备包括gopro、索尼等,他们方案的把控程度、后期处理的时间都是非常大的消耗。
VR是一个颠覆性的产业,它能给人一个崭新的体验。但是目前因为拍摄的画面质量和内容都偏低,所以要把VR的刚需做好需要提高用户的体验。
AURA只有20厘米直径,为什么我们能把20个摄像头装进排球大小的机器里?我们是从算法出发,而不是先把这个硬件做起来在设置算法的。对于拼接的算法,学术界至今还没有能完全解决。所以基于现有的算法,必须有的硬件去配套,才能做到最好的效果。
为什么要做20个镜头的相机?
广角的视频和鱼眼视频的区别。目前大家使用的VR相机大多是鱼眼相机拍摄的,它的优势是可以拍摄很大的fv、方便拼接、减少相机数量。这带来的缺陷就是视频边缘的分辨率比较低。而广角的就能保证整个视频的质量。
目前市面上较好的全景相机像gopro、jaunt等水平方向的镜头数量都不会低于12个。我们水平方向16个镜头是目前能拍摄出最好的效果。
我们在镜头上也做了改进,市面上有的镜头是塑料的,在散热和稳定性上很差,我们现在用的是玻璃的,这样能保证高压工作的稳定性。
“10K”一词,最近被太多人提及,硬件厂商也习惯了堆参数,究竟拍10K的视频是否有必要呢?实际上是有必要的。人眼可视注意的区域不到70°,大部分VR屏幕的主要用途都是锁在70°范围内,现在如果是一个2.5K或者3K屏,有一半的分辨率是1440p,只集中在在70°范围里,只有乘以5才能达到屏幕的极限。“现在左右眼8K的视频,可以达到现在2.5K或者3K的屏幕极限。AMOLED屏幕,只有达到10K的画质才能把这个屏幕用满。”张聪向笔者解释道。
拼接质量的四个方面
拼接质量的优劣主要看以下四个方面:是否存在缝隙;光线的过渡是否自然;3d不晕并且给人很强的沉浸感;清晰度。而拼接存在的主要问题包括内容的缺失、变形和重影。
目前最常用的是gopro的kolor、facebook的surround360,而我们采用DKV。kolor很难把所有内容都拼接到;Facebook的算法可能会造成图形的拉伸恶化形变,相较之下我们在这方面的算法还不错。
不同的拍摄会导致亮度差别大,过渡也比较不自然,导致模糊。Facebook并没有在这方面进行优化,我们对每个像素都会计算大约的参数。
好莱坞的3d做了很长时间,他越做越好,越做越舒服。我们目前只是想做到头不晕,这就需要没有垂直方向的视差,并且同深度水平方向视差做到一致。kolor只是把左右眼的画面做了一个简单的平移。Facebook必须依赖硬件,但是不同硬件算出来是不准的。
什么样的设备能支持10K?
pc一般电脑很难带的动,可能需要价格15000左右的电脑配置可以直接进行播放。
而目前骁龙835只能支持4k的解码,我们如何用4k的解码芯片达到10k的效果呢?
第一种通用的是动态码流。看的地方清晰,不看的地方模糊。我们人眼看到的是不到2k的区域,所以以4k的解码芯片是足够的。这样的缺陷在于换画面的时候会有不到一秒的延时。
第二种是动态区域。就是渲染图像里面动的区域渲染,不动的区域不进行实时渲染。这意味着10k的视频不一定要在手机上全部渲染出来,只要渲染部分的区域就能达到10k的画面质量,这也是我们的解决方案。
最后打个小广告。我们开放拼接平台,也可以帮助用户提供专业的拼接服务,价格其实很便宜。
针对不同的客户需求,我们将推出新的VR摄影机:AURA MINI。设备为8目190度鱼眼镜头,电池可更换续航更佳,体积上将是市面上体积最小的专业级VR摄像机能达到360°3D 8K的画质效果及360°音频采集,可做直播,配合AURA WORK和AURA Studio能够实时监看,无缝拼接。就像之前说的,鱼眼镜头画面质量没有大的高,但是适合小的studio使用。