卡塔尔世界杯即将迎来最终篇章,这也意味着四年一届的赛事步入了高潮阶段。
回顾已经结束的比赛,高科技对世界杯赛事的影响是巨大的,尤其是半自动越位技术的引入,在揭幕战第三分钟就影响了比赛的进程。
巧合的是,在世界杯赛场外,笔者同样看到了一个更加游戏化的赛场复刻高科技玩法,将世界杯的感观体验直接拉满。
作为本届世界杯中国大陆转播商,在赛事直播之外,中国移动咪咕还将现实场景下的赛场时刻,快速复制到游戏化的数字平行世界,制作出子弹时间、鹰眼环绕等惊艳视觉的赛事视频,甚至制作成游戏关卡,让玩家们可以操控国际球星驰骋元宇宙赛场,沉浸式体验传接拿射。这样一套操作下来,让广大球迷大呼过瘾,也引发了行业的广泛思考。
笔者研究发现,这套玩法的核心原理与半自动越位技术有些相似,它是通过Arena4D体育运动捕捉系统对赛场直播画面进行实时解析,识别在场球员的关键骨骼节点,从而进行全景还原。
而这背后是基于游戏本身拥有的海量体育数据库,通过对诸如InnoReal这样的直播技术和MotionMatching运动引擎等技术的应用,将任意视角、任意机位的比赛过程复制下来,在游戏中再现。
将实世界快速复制成游戏的平行世界,这个过程依赖了大量的算力支撑,5G网络技术、AI人工智能的发展也为之提供了关键的基础保障,而这些正是咪咕的核心优势所在。
复刻技术在哪些行业正在被广泛运用?
目前来看,复刻技术其实已经被运用到了多个领域。
当年,巴黎圣母院失火,让《刺客信条:大革命》这款动作冒险类游戏步入公众视野。这款游戏对巴黎圣母院进行了非常精细的教堂3D建模,这其实就是复刻技术的早期体现。然而,这样的复刻属于静态环境之下的还原,据说当年为了将巴黎圣母院搬入游戏中,设计师花费了两年时间在游戏中搭建场景。
而此次咪咕将世界杯现实场景通过技术手段进行实时复刻的动态模拟,相比之下,要解决大场景下、多人快速运动的动态捕捉,面临极其复杂的信息处理,难度要大很多,对技术的要求自然更高。这种技术也已被应用到模拟飞行、模拟碰撞、风洞模拟以及自动驾驶训练等场景下。
以模拟飞行为例。模拟飞行的本质是对真实世界飞行中遇到的各种元素,例如空气动力、气象、地理环境进行还原。同时,结合飞行操控系统、地面飞行引导等综合参数在计算机中进行仿真模拟。这当中的关键一环,就是视景投影系统对现实世界进行动态复刻,在数字环境中展现。
与模拟飞行类似的还有自动驾驶技术。谷歌无人车Waymo利用真实自动驾驶车辆只收集了0.2亿英里的公共道路数据,但其自动驾驶套件Waymo Driver每天在虚拟道路上行驶约2000万英里,目前已经模拟行驶了超过150亿英里。同时,Waymo利用此类虚拟道路旅程磨练Waymo Driver的导航能力,让该系统接触到未来在公共道路上运送乘客时可能不得不面对的新场景。比如,工程师可以让车流加速,或者在仿真车辆之间增加骑自行车的人。此外,该仿真平台还可生成新型道路场景,让AI对现实世界中尚未遇到的罕见场景做好准备。
除了模拟训练之外,复刻技术在工业领域的应用也是随处可见。
宝钢股份已宣布成立“全真互联数字工厂”,拟围绕宝山基地1580热轧厂,实现热扎产线中关键设备工艺的数字化;然后,基于3D重建与动态建模的游戏技术,通过视觉识别对生产中的关键工况进行实时建模;最后,通过游戏引擎实时渲染与云游戏/云渲染的分布式能力,以及无穿戴实时动作捕捉、虚实交互、视觉AI及实时音视频等游戏技术,渗透进生产线的方方面面,逐步还原实时的工业现场环境,达到产品在工厂生产中全链路的全真互联,实现“产品级”/“工厂级”孪生。
从这些案例可以看到,复刻技术拥有极为广阔的市场空间,不仅在文化娱乐、智能模拟、工业制造等领域全面开花,在军事、医疗、交通等领域也有很多相似的案例,这里不再列举。
复刻技术可以解决哪些问题?
总结去看,可以分为以下几个方面。
第一,完成我们在现实世界中无法做到的事情。
新华社在去年推出了一个数字航天员小诤,小诤最大的优势就是在任何环境中生存,有无数的分身代替真正的宇航员去完成一些极端任务。比如她可以带领观众游览天问一号着陆的乌托邦平原——火星上最大的平原,还有20亿年前由宇宙伟力所塑造的太阳系最大的峡谷水手号峡谷等,让观众足不出户也能体验逼真的火星环境和真实可信的物理运动。
同理,中国跳水队此前也尝试使用了“3D+AI”跳水训练系统。跳水从起跳到落水只有短短两秒钟,而运动员则需要完成起跳、翻腾、转体入水等一系列高难度动作。AI教练可以将跳水全过程和场馆场景进行数字模拟、360度自由视角的时空定格、自动抽取运动的关键动作进行定格分析与量化评估,从而更加精准高效的对运动员进行复盘指导。
再比如此次咪咕推出的AI复刻玩法,通过Arena4D基于多角度、多相机的视频信息采集以及高性能的算法,采集捕捉赛场中的所有信息细节,如球的位置、球员的位置、球员的姿态等,结合望尘科技海量的球员角色数据库和球员、球场的高精度模型,在虚拟空间对赛事进行重建,最终用接近照片级真实的质量完成渲染,操作者可以用“上帝视角”自由地进行时间调整、全方位镜头调整并对赛事过程进行检索、分析。
第二,更加高效地去完成一些事情。
比如自动汽车的模拟驾驶。兰德智库提出,一辆自动驾驶汽车需要经过110亿英里测试才能证明它达到一个合格的人类驾驶员水平,而地球到太阳的距离是0.932亿英里。在现实世界中很难让一辆汽车模拟150亿英里的测试,但在数字世界里,这一切都可以实现。
相似的还有在医疗领域的一些运用。目前国内一些知名大医院都已开通远程医疗、智慧医院等项目,远程进行手术指导。而这当中的关键一环,就是对病灶进行快速复刻投影,医生便可根据实时传输的数据,在画面中进行标记和提示,远程指导手术。
第三,让我们提前知道即将发生的事情,从而找到解决方案。
在《复仇者联盟》中,奇异博士模拟了1400万次未来,找到了打败灭霸的可能性,这是电影情节,也不是电影情节。
前几年的澳大利亚大火,全球最大的GIS厂商ESRI利用虚幻引擎和ArcGIS的数据,模拟和预判了澳大利亚森林大火对周边环境的影响,从而提前做好了抗灾救援的部署。
目前全国各地都在积极推动数字孪生城市建设,努力实现智能交通、消防应急演练、防洪救灾模拟、节能减排等城市管理功能。去年,贵州先行试点了数字孪生交通系统,就是利用视频监控,融合毫米波雷达,全息感知机动车辆、非机动车、行人等交通要素,实现在数字空间构建现实交通系统的映射模型,进行实时分析与跟踪,以解决交通资源浪费、信号系统功能僵化、交通事件无法预测及快速响应等交通问题。
游戏在该技术的发展中承担什么样的作用?
可以说,复刻技术是实现全真互联、数实融合的技术底座。而在这个底层技术中,游戏引擎相关的数字内容制作、物理仿真、真实感渲染等技术的发展已然成为实现数字孪生的核心驱动力。
正是游戏引擎在链接未来的重要性,近年来,从Unity到Unreal,游戏引擎均被广泛运用于高科技行业,且备受资本青睐。
而在本次世界杯上,咪咕基于云游戏引擎成功打造的实时还原精彩射门的沉浸式体验,也进一步显示了咪咕在人工智能、数字孪生领域的先行者地位。
结语:
作为一家创新文化全场景沉浸体验生态的科技公司,咪咕不仅在IP内容聚合方面具备优势,在超高清内容制作、云游戏制作等游戏引擎方面也深耕多年,积累了丰富的5G+XR实践经验。这些经验也将继续为文博文旅、虚拟仿真、文娱演艺等多行业进行数字化赋能,为用户带来更加丰富多彩的数实融合体验。
这次中国移动咪咕基于自身的内容优势和技术能力,打造的AI复刻、游戏还原等元宇宙黑科技玩法,提供给我们一个新的提示,那就在5G网络技术、AI人工智能以及AR/VR不停发展的当下,会有越来越多的新玩法、新形态不断涌现。
犹记得何同学的那期有关5G的视频最后提到的,在4G发展时没人会想到移动互联网会发展成今天这样,同理5G的出现绝对不单单是网速更快而已,它有更多的可能。