一、项目背景
2022年俄乌冲突中除了无人机在双方作战中大放异彩,另一个以互联网为载体的舆论战场更是扑朔迷离。神奇“泽连斯基”在哪里,成为众多网民关注的另一个战场焦点。
俄乌双方基于互联网的认知舆论战激烈程度堪比线下战场,乌克方通过社交媒体频频发布己方领导人泽连斯基亲临前线的视频和图片,鼓舞士气。同时发布打击俄方的战场毁损视频和图片,用来打击敌人士气。俄方同样运用以上手段在互联网上打击乌方,对乌方发布的视频和图片发起真伪辨别,网民玩起了“找不同”的游戏。
其实我在这里——元宇宙数字人闪亮登场!
随着元宇宙概念的兴起及相应技术的发展,通过专业影视化的全流程制作和数字人建模软件,可以轻松构建出超写实的数字人的三维模型,迅速生成超写实虚拟数字人。并通过动捕系统采集真人的肢体动作、面部表情、音色声纹,根据战场需求,将制作好的数字人合成视频,投放到指定环境,达到以假乱真的目的。
二、超写实数字人一体化制作系统 概述
虚拟数字人是指存在于非物理世界中,由计算机手段创造或使用的、具有多重人类特征的综合产物。在虚拟数字人形象特征的细分类别中,目前普遍又被划分为卡通级,写实级,超写实级别三大类型。
而在上述三大类型中,对于超写实数字人的制作则是艺术与科技深度绑定的产物,以此引出的数字孪生概念(真人数字化)更是拓宽了超写实数字人在数字化时代的应用领域及战略价值。某司旗下的超写实数字人一体化流程综合影视领域及AI算法领域制作技术,提供定制化可选搭的后续交互模式,使得超写实数字人可搭载于各类型业务平台,承担多维度任务。
网络配图
超写实虚拟数字人是通过摄像机及3D扫描仪采集真人三维轮廓,面部表情,真人音频,关节点运动轨迹等参数,经过AI算法融合和解构这些三维数据,实时生产为数字资产。并可以将这些数字人的音视频数据,运动数据映射至需要合成的各种环境里,达到以假乱真的目的。相对于,影视节目制作中传统虚拟演播室绿布抠像合成技术,虚拟数字人是另一种维度的飞跃与提升。
三、超写实数字人一体化制作系统 特点
本产品基于强大的电影级高质量三维生物角色数字资产团队的生产经验储备和成熟的生产流程,结合自主开发和不断改进的智能算法,主要用于三维扫描及非扫描建立超写实数字仿真人、三维场景等的数字仿生、孪生模型。
(一)高效建立超写实三维数字人,在结合智能算法的优势下,超写实三维数字人可在十几日内完成,AR全息通讯级别三维数字人建立仅需数日。相较于用影视领域传统方式生产超写实三维数字人以月级别为单位的工作周期,制作效率上大幅提升。
(二)超写实三维数字人生产精度更高:超写实高精度三维数字人与目标真人三维参数误差为毫米级,超级精细的皮肤材质精准到毛孔层级,皮肤次表面状态可达到与真人1:1以上的还原级别。
(三)矩阵扫描超写实三维数字人成本低,可达到同等写实级高精度矩阵结构三维采集质量,硬件设备成本仅需当下主流硬件成本的一半左右,写实级高精度三维数字人从采集到资产建立人员数量更加精简,架构更加优化。
(四)具备写实级高精度三维数字模型资产和各个环节经验的积累性和持续发展性,建立国内的高品质的可多元化对接的数字资产库,不断提高高品质的数字资产的复用率。
(五)实时交互方面、通过光学感知、深度感知、空间位置感知、惯性物理感知等相关软硬件对写实级高精度三维数字人物模型进行实时驱动,多重感知技术的应用使得数字人在动态方面无限贴近于人类真实行为反馈,真正实现写实级高精度三维数字人的实时交互功能。
(六)产品应用广泛,同时具备对应的呈现端硬件开发和测试能力。此外,最终呈现方式支持多种的AR、VR、全息膜、全息OLED箱、大屏、电脑、手机端的全息和非全息终端呈现,满足不同领域提出的需求。
四、超写实数字人制作流程
三维数字人物采集:
3D/4D光场扫描采集数据信息;
AI算法结合人工修复完善数据;
基于面部扫描纹理数据贴图重构;
三维数字人物雕刻:
千万面毛孔级人体部位精雕;
多维度层次皮肤及光照贴图制作;
皮肤次表面复刻还原;
三维数字人物驱动:
人物毛发及布料动态制作与动力解算;
人物动作捕捉数据采集;
人物面部捕捉数据采集修复与优化;
结合数字环境的实时动态展示;
可定制的模块化:语音模块交互模块,AI交互模块,实时对话魔模块等。
五、应用领域
(一)认知战领域
未来认知舆论战的战场上,数字人制作及运用技术,将成为认知战的一把利器。根据战场实际需要,把超写实虚拟数字人便捷合成到指定场景,比如地标性办公室、一线兵营、前线战场等真实环境,配合前期采集的肢体动作,面部表情和真实的声音,制作成鼓舞士兵的视频。
(二)虚拟指挥官
随着数字孪生、元宇宙、区块链等技术的不断发展与成熟,未来数字孪生战场上虚拟指挥官一定是其标配,将对未来战场的指挥模式、战争形态都会带来深刻的影响。
(三)军事教育培训
超写实数字人技术应用于教育培训,如:装备研发、装备维护,数字教官给予内容讲解。模拟战场人员指挥调度,模拟人员现场行动方案等等。
(四)全息仿真
航天科研、企事业单位、机关单位、场馆博物馆等场景,实现全息虚拟演习、全息通讯、全息模拟、全息讲解、全息导览、沉浸式数字体验等相关展现形式,为数字化经济奠定扎实的内容基础。
(五)虚拟主持人、演出、偶像,高端虚拟客服等以数字人为载体的泛娱乐和商业领域。