回溯历史上每一项划时代技术和产品的诞生,似乎都经历着从被误解到走进现实的阶段。
1803年,在法国塞纳河沉没的那艘蒸汽船,其制造者富尔顿顶着人们的质疑声,在4年后正式开启了蒸汽轮船时代。一百年后,莱特兄弟制造的第一架飞机尽管最长只飞行了59秒,但也成功为人们打开了对天空的更多想象。
而如今的元宇宙,也正处于从概念落入现实的关键转折期。
2022年,我国15座城市相继颁布了28份元宇宙专项支持政策,以三年为期规划了总计8500亿元的元宇宙产业规模目标。
这意味着,我国元宇宙各赛道的布局也将逐步迈入深水区,涉及社交、文娱、电商等多个应用场景都在探索元宇宙落地的新模式和业务闭环。通过脱虚向实的发展,元宇宙正逐渐从一个少数人的游戏,转变为普罗大众的生产力工具。
当无数湍流汇聚,元宇宙这股浪潮该向哪里涌动,才能冲撞出正确的出口,将三十多年前斯蒂芬森笔下的狂想带到我们面前?
当元宇宙由“神坛”走向“现实”
一直以来,游戏作为许多前沿科技创新的“试验田”和“助推器”,是人工智能、5G、3D图形算法、AR/VR等技术早期成长的绝佳土壤,对元宇宙来说亦是如此。
当一项新技术在游戏产业中发展到一定阶段,其所积累的成熟经验和形式将会溢出到更广阔的领域,帮助更多行业提高生产效率,甚至颠覆整个生产流程,如机器人之于建筑,数字人之于影视直播,虚拟仿真引擎之于工业制造、自动驾驶等。
随着游戏产业链的不断扩张,游戏的表现形式和载体也变得越来越多样化,游戏类综艺则是其一大重要表现形式。如今游戏类综艺具有的强互动性、竞技性,以及其真人秀属性,是检验一项技术能否真正进入人们现实生活的手段之一。
去年11月底,国内一档名为《元音大冒险》的综艺就让我们看到了新的想象空间。节目构建了一个月球上的虚拟世界——MEMOON元音大陆,通过面捕、动捕技术与虚拟现实技术相结合,将嘉宾在虚拟世界与现实世界之间的互动实时展现给观众。
谈及策划这档节目的初衷,《元音大冒险》总导演陈伟的回答是:“我们希望未来人们不仅是用眼睛看综艺,用耳朵听,还能够通过虚拟形象的方式进入综艺世界,在节目里玩起来,通过技术进步把人类的娱乐体验带入下一个时代。”
这档具有科技实验意味的综艺,无疑是节目组对元宇宙全民化的一次大胆尝试,更重要的是,元宇宙的基础建设是一个摸着石头过河的过程,而《元音大冒险》对创新技术的融合,一定程度上向业界展示了元宇宙应用的雏形,为行业对未来元宇宙产业和更多可能性的尝试提供了一个行之有效的发展思路。
技术是元宇宙破局的关键钥匙
在新颖前卫的节目构想之下,技术挑战随之而来。
因为相比传统节目制作,《元音大冒险》运用了虚拟制作、动捕实时合成渲染、数字人驱动等极少应用的制作域,这在全球范围内也是一次没有先例可循的综艺模式探索。
横亘在节目组面前的两座大山,一是如何精准捕捉和传递人的情感,这并非单纯依靠动捕技术就能完美实现,面捕其实更像是灵魂。在传统好莱坞大片中所用到的专业面捕设备成本高昂,且无法做到实时处理,同时在拍摄过程中还要应对许多突发问题。
但在一个非脚本创作的真人秀中,需要实时采集、实时合成、实时输出嘉宾的面部表情,并高精度地还原到场景中。同时与普通民用设备相比,影视行业所需的设备对系统准确性、稳定性和容错性都有着更高要求。
在真人秀完全直播的状态下,设备必须拥有庞大的采集能力、运算能力和高可靠性,才能满足节目长时间多机位动态录制与实时渲染合成的需求。
为了解决实时面捕这一最关键的问题,节目组开创性地使用安卓手机来完成面捕工作,嘉宾脸上无需打点,仅通过一台手机的摄像头就能实现基于300个人脸特征点的捕捉和识别。而这个看似不可能的任务,便是由第一代骁龙8+移动平台作为底层技术支持。
“面捕技术是元宇宙里非常重要的关联技术之一。因为你在元宇宙中的一举一动,以及虚拟形象的活灵活现,核心都离不开面部捕捉。”高通骁龙技术专家刘晓光谈到。
一台搭载了骁龙8+移动平台的智能手机,不仅能高精度、低功耗地实时跟踪和识别人脸面部表情,并映射传输到元宇宙的虚拟形象中,还能避免设备长时间工作发热引起性能下降,导致数据不稳定甚至丢失的问题,降低了节目制作的门槛和成本。
解决面捕的技术挑战,只是完成了嘉宾“进入”元宇宙的难点。但让观众身临其境地“看见”嘉宾所处的元宇宙世界,增强节目沉浸感,是影响观众体验的另一个关键,这一重任则落到了VR设备的身上。
“VR最重要的就是视听沉浸感和交互。对现场观众来说,VR是他们进入元宇宙的入口,是体验元宇宙的一个最理想的硬件平台。”奇遇VR高级产品总监王斌解释。在视觉方面,由于显示和芯片的算力是结合在一起的,做4K效果的难度较大,会有严重的纱窗感、颗粒感。而搭载骁龙XR2平台的奇遇Dream VR设备能够将4K屏幕进行点亮驱动,并达到4K 90帧。
针对手机端用户,《元音大冒险》还开发了一个应用,用户戴上VR设备即可在线上大厅观看和实际演播现场同样的节目效果。为了进一步增强手机端用户的参与感,节目还在同步开发元音APP,用户在APP里能够与虚拟人物实时互动。
从面捕到VR,基于骁龙支持的技术,《元音大冒险》通过将前沿技术与内容模式创新碰撞,只需一台手机、一台VR设备,就能轻松便携地为人们开启元宇宙的大门,在降低行业准入门槛的同时,也让更多消费者和企业参与到生态的共建中,加速元宇宙的商业化进程。
元宇宙,已经不再是少数高端玩家们的游戏。
如何解锁元宇宙的更多可能性?
不难发现,不管是基于手机面捕技术的低成本、便携化,还是VR设备视听沉浸感和交互体验的提升,现阶段行业在解决的仍是元宇宙的“入口”问题,这只是人类迈向元宇宙未来的第一步。
如果将元宇宙理解为第三代互联网,我们依旧处于元宇宙从0到1的构建阶段。
想要离元宇宙更近一些,首先要发展包括5G、云计算、边缘计算在内的核心底层技术,此外芯片、显示屏幕、电池等硬件技术也急需升级和解决。这一系列基础设施建设将是一个复杂的系统性工程。元宇宙世界中各种素材的生成、交互以及设备的接入、数据传输等环节,也十分依赖人工智能的驱动,必须要端侧具备极大的算力支撑。
图源:视觉中国
而这些技术,亦是高通积极研究和部署的方向。通过“简单、轻量、低门槛”的技术理念,高通凭借自身在移动连接、人工智能、XR、计算、图形和音频等技术领域的优势,配合元宇宙生态的各种合作伙伴,正加速让元宇宙的价值回归现实本身,为消费者和企业提供更丰富的定制化体验。
元宇宙并不是一座空中楼阁,它的未来与人类生活是紧密联系的。未来的教育、医疗、零售、金融、城市治理、远程办公、工业自动化以及自动驾驶等广泛领域,都能通过元宇宙创造出全新的可能。
不管它是娱乐生活的载体,还是工作模式的生产力工具,元宇宙都在逐步打破现实与虚拟世界的边界,通过更多元的方式切实帮助人类提高生活质量和水平。
也许,未来的元宇宙会像水、像电、像信号那样,潜移默化地渗透到我们习以为常的生活中。而高通这样的企业,正努力以科技为钥匙,打开这扇未来元宇宙大门。