10月6日,元宇宙女生ViVi子涵在同名的抖音帐号上切了一场即时VR巡回演唱,那也是国内首个虚拟人物直播间巡回演唱。综艺节目全过程动画渲染直播间,应用即时动捕、即时神情、即时头发、面料校正系统等技术,与此同时适用即时5G 8K内容输出,巡回演唱里的虚拟人物和虚拟场景所有根据三维立体建模,现阶段观众们能够通过手机短视频app开展收看,将来用VR眼睛收看,不仅可以走入巡回演唱,可以跟网络主播开展沉浸式互动。
元宇宙女生ViVi子涵
元宇宙女生ViVi子涵究竟什么来头?
ViVi子涵是北京齐乐无限文化艺术科技公司开发设计的一款真人版传奇1:1建模的AI虚拟人物,具有真人版即时神情、姿势、AI视频语音推动、AI姿势推动、AI绘画创作、智能问答等功能。
据了解,齐乐无限是一家专注于XR模拟仿真的科技有限公司。该公司的创业者来源于中国航天科工及中国科学院,他们拥有军工用级别的模拟仿真算法,商品包括XR手机模拟器及具体内容、即时AI虚拟人物。
目前市场上的虚拟人物因为技术限定,大多以二次元为主导,超写实类虚拟人物绝大部分选用影视剧CG技术中后期3D渲染生成,不具实用性,没法适用视频互动。齐乐无限在传统建模技术上打造全新一代的数字虚拟人物,并形成规范,具有171个神情,78个面部特征点,mm级身体和动作动作捕捉等,通过这些技术完成成本低高模拟仿真实时互动。
ViVi子涵直播间歌唱互动交流
元宇宙是以互联网技术演变而来的三维全沉浸于的数字孪生全球,传统互联网早已能满足人们从醒来到入睡期间的各种各样要求,元宇宙能够让人们更真实地参加互联网技术,完成传统互联网不能满足的体验。除开VR技术产生的视觉、体验里的全感更新,还会继续产生新的经济和文明体系。人是一切生产活动的主体,齐乐无限精英团队觉得将来每个人都会有自己的虚拟人物,虚拟人物是元宇宙的灵魂和发展引擎。建立ViVi子涵这样一个真人版1:1建模的虚拟人物的初衷就是为这个目标做show case,把齐乐无穷无尽技术展现给大家,这一套独有的从算法到产品再从领域的完整XR直播间全栈式解决方法能够很大程度上减少XR具体内容项目成本,提高工作效率,使元宇宙里的即时社交媒体在真正意义上可落地式。将来根据齐乐无穷无尽XR虚似写作视频直播系统给予给所有人,立足于混合开发虚拟直播,虚拟社交,AI虚似守候等。
出生军用,XR行业不张扬高奢的高配
齐乐无限团队在军用行业完成产品研发了多战机流体力学及运动仿真算法,军工用模拟仿真等级某导弹发射车手机模拟器,6可玩性健身运动平台及动力学方程和运动算法,根据XR的单兵仿真系统。立足于Intel、三星、sony、宝妈、奥迪车、volvo、丰田汽车等国际头部企业。值得一提的是,齐乐无限或是提前准备公布VR近视眼镜世界互联网巨头某A企业定制VR运动座椅的技术服务提供商,全世界除开齐乐无限,也有一家技术服务提供商是非洲企业Israel GOA-Tech Ltd. 曾经我也立足于军用仿真模拟行业。
在职齐乐无限CEO的周道生于1987年,以高考理科满分的过人考试成绩考入华北电力大学电子信息科学技术专业。以周身的优异的成绩和研究专业能力,学校对他张开了保细读博的大门,但是他却独辟蹊径,入华航天科工三院,他希望能够从应用实践中寻找大量概率和发展潜力。恰恰是中国航天科工的经历使他获益匪浅,26岁就出任上中国航天科技模拟仿真企业虚拟现实公司经理,组织好几个大中型军、民模拟仿真行业产品研发,参加知名航天员练习用航空模拟制做,落地式各种大中型军工用模拟仿真手机模拟器及兼容XR具体内容等。
据了解,齐乐无限目前的机构股东当红齐天集团公司刚结束B轮数亿元股权融资,小米手机、建银国际领投,联想创投、杂草创业投资投股。当红齐天原来公司股东除开知名导演张艺谋外,也有中航信托、联想创投、青芒股票基金、Intel(intel)等世界顶级大佬。齐乐无限借助那样强大的服务平台,再加上军工用级别的XR模拟仿真算法,已经搭建自己的元宇宙细分化跑道堡垒。
观察丨如何造六千人同时游戏、延迟在1秒内的直播互动元宇宙平台?
怎样看待元宇宙?将来元宇宙里的游戏会是什么样的?搭建元宇宙需要哪些技术性?
对于这些难题,FunPlus商务接待高级副总裁、Pwnk项目创办人濮冠楠在接受澎湃新闻网(www.theppaper.cn)记者采访时表示,“对于元宇宙浅显的理解是,它是一个以前不是很存有的东西,它通过技术性的手段将人联系在一起。元宇宙最核心改进的地方是,不计其数个人如何在一起做某件事情。我们会认为在元宇宙这个时代来临以后,它可以实现以前完成不了的东西,比如我们现阶段根据视频采集完成了450多的人一起玩游戏,以后我们还可以完成6000本人一起玩游戏。”
挪动游戏企业FunPlus成立时间2011年,服务遮盖全世界200多个国家和地区。2017至2021年,FunPlus持续四年在data.ai(前身为AppAnnie)上登上本年度我国生产商出航收益榜第一。
4月底,FunPlus卵化的视频互动元宇宙服务平台Pwnk在Steam发布。简易了解,云原生游戏Pwnk即是把游戏内容与视频互动融合,当主播打开Pwnk内嵌的各种游戏时,直播间的观众们便可即时参与其中。Pwnk自身包含了几十种游戏游戏玩法,以迷你型大逃亡游戏Pwnk Royale为例,网络主播和观众参加即时大鱿鱼游戏类流媒体播放游戏综艺节目,每场取代五分之一的参加者,最后优胜者将于30分钟的争霸赛后得到全部积分兑换。
从Pwnk Royale就可以较为容易理解其设计理念:Pwnk协助网络主播更轻松地吸引住直播间观众们,从而使互动式直播话题建立变成每个人都的一项头号公敌。针对观众来说,她们不会再只是收看具体内容,还能够参加、奉献,甚至成为她们最爱主播的游戏综艺节目的焦点。
这是一个彻底一个新的、在市场上还不常见的娱乐形状,这类产品形式是否是被需要,是主创者自嗨胡编乱造或是有其市场的需求在?
濮冠楠剖析,“我们先思索在互联网发生后可以互动的娱乐形状,如游戏娱乐和直播娱乐。”
游戏的优点是相对高度互动交流,具备多样化的可搜集物件,变现价值一般高些。它主要缺点,绝大多数游戏并没有真人版的实际意见反馈。参与人数比较有限,像吃鸡游戏这种游戏较多仅有100名游戏玩家即时抵抗。游戏的生命期也有限,休闲游戏变现能力弱。
另外一个跑道直播间娱乐,它的优势是真人版即时反馈,大部分的直播间娱乐可以达到上百人、上万人乃至几十万人规模性参加。与此同时,直播间娱乐作为一个平台化的服务,生命期较长,具体内容较为多元化。直播的缺点是欠缺能够收集的虚拟商品,互动交流具体内容也不如游戏多,变现能力弱于游戏。
Pwnk的努力方向即是把游戏娱乐和直播娱乐的优点结合,完成真人版即时反馈、规模性即时参加、有更长生命周期的娱乐方式,与此同时相对高度互动交流,能够收集多样化的虚拟商品。“我们希望来自于单一用户的收益更高一些,给主播的分为收益也更高。与此同时在这个服务平台里游戏的体验跟其他网站不一样,在这个服务平台里面客户随时都可以参与玩游戏,更像是一个网络直播平台的理念,能够既来之即走。”濮冠楠讲到。
濮冠楠觉得,在这个新的模式下,考验就在于要不断创造出新玩法,新的创意,有意思是其中的核心。
“有意思”的生意:无尽复玩的规则,游戏的有意思如何结构?
什么叫有意思?如何创造一个“有意思”的游戏?
在濮冠楠来看,有趣的东西分为两种,一个是具体内容里的有意思,一个是标准里的有意思。例如一副扑克牌,扑克游戏本身的设计理念——A到K,上边的花色便是包装的具体内容。扑克游戏这一游戏玩法为何长盛不衰,濮冠楠觉得主要原因是它的玩法比较简单,它标准设计方案可以让人不断复玩。针对游戏,濮冠楠觉得,游戏更多是较简单标准 比较复杂的包装。
那么在视频互动场景中,濮冠楠觉得最核心的考验取决于——如何设计出一个可以长期复玩的规则。他例举道,不论是德州扑克游戏、斗地主游戏,其核心都是在标准设计方案,即便每日玩几小时都不会觉得枯燥乏味。要是没有一个很好的标准,全部具体内容消耗的速率就会非常快。
濮冠楠提到了以前好多人做视频互动可能存在的错误观念,即更注重信息自身,如互动型的集聚。“互动型集聚耗费特别快,等同于制作成本远高于耗费成本费,ROI无法右库。”
在Pwnk网站上,女主播根据互动交流游戏与观众互动,得到网友适用。粉丝们变成Pwnk 当场游戏综艺节目和游戏狂欢派对的参加者,协助喜爱的主播获得作战,同时获得装饰物、网络主播虚拟人物和宝宝等虚似藏品,从而在战斗中变得更强大,这种虚拟商品也可以进行买卖。
它跟传统式游戏的设计的区别在于,传统式游戏里只有一种参加种类——游戏玩家。这个新的方式里参加者即变为三种:游戏玩家,网络主播(等同于节目主持人的角色),观众们。
濮冠楠讲到,“大家在设计每一款游戏的时候,其实我们并不是把每一款游戏当做一个单独游戏去设计,而是把全部感受连接成一个完整的感受。核心的设计逻辑便是紧紧围绕2个东西:轻微的玩法是不是有水平串在一起,变为更为深层、有意思的玩法;大家设计方案游戏的时候,是不是能兼具三个不一样的人群。”
技术难点:全世界 实时互动 6000人与此同时…怎样把延迟控制在1秒?
视频采集,包含云游戏里最核心的一步便是延迟时间,我国游戏出航会遇到的一个核心问题也在于此——每个地方用户的延迟时间,例如国外用户和欧洲地区客户。如果再加上如Facetime、Twitch、YouTube那样不同的服务平台,也有每一个平台的延迟时间。即使延迟仅有8s,造成的游戏客户体验也是令人无法忍受的。
与此同时,全部网络直播平台的建立实际上比较复杂,从视频采集的消息推送进去,到视频采集的编号、编解码,再进行不同的消息推送,再按照手机客户端不同的部位,推送到就近的CDN里,正中间有这么多流程,怎样降低其中的延迟十分注重。
Pwnk团队一开始将希望寄托在亚马逊云科技新发布的服务项目Amazon Interactive Video Service (IVS)。但一开始测试IVS,延迟有15秒之多,之后降至8秒,依然不能达到流媒体直播 实时互动的要求。最终2个精英团队一起合作最终将延迟降低到1秒。在这样的基础技术上,Pwnk完成了服务端上千人同台的帧同步即时抵抗,构建直播间 实时互动的中远期技术要求。
这类把全世界客户连在一起的总体目标都是在云的技术性发生之后,才可能完成。“如果从地球上的一端飞往另一端,光的速度都要跑125ms,因此交给服务平台解决的时间是不多的,在这么短的时间里边,怎样才能把这些数据处理方法好,不外乎是三条路:极致的优化计算方法,让数据处理方法可以越来越特别快;更无限的资源的提供;平稳的全球的网络。”亚马逊云科技数据原生态业务部处理方案架构师主管刘力力讲到。
除开低延迟以外,也有数据问题。如今在云上,一个游戏有非常多的数据信息,如购买的交易数据,游戏玩家各种各样武器装备数据信息,也有各式各样必须缓存文件的数据。怎么样用传统的方法由一个数据库系统来解决所有问题并不现实,是因为量很大。次之,每一种数据信息的处理方式也不一样,如买卖型数据信息就要求其一定不能丢、一定不能坏,其他的就真规定完美地快,例如买完武器装备马上就要在游戏中使用。
要是没有云,仅是构建全球网络,完成的难度就无法想象了。“假如靠公司自建机房,这几乎就是彻底不可能的事。对于中国出航的游戏公司来说,最核心的事情就是如何验证自己的产品实体模型,与此同时寻找比较靠谱的商业化的途径。”濮冠楠说。
未来的游戏与元宇宙的搭建
“我们认为未来在元宇宙里,能够数万人、几十万人共同努力某件事情。它以至于不会再是一个游戏,例如它可能是一千人一起美术绘画。一幅画有可能是2000个清晰度乘1000个像素,它一共会出现200万只清晰度,未来在元宇宙中,我们可能能够把这200万只清晰度拆卸成1000本人,每一个人画在其中2000个清晰度,拼出的东西是完全不一样的感受。”濮冠楠对澎湃新闻网(www.thepaper.cn)提到。
对于未来游戏的构想,濮冠楠的思考从游戏和直播的对比逐渐,“从1972年电子器件游戏造成到现在已经50年时间,游戏已经是一个挺老的行业。以往十几年网络直播平台盛行,一个有意思的事情是为什么会到娱乐中又会产生一个新的东西呢?其实就是直播间增添了游戏娱乐并没有出现过的东西——人,将人真正授予拿了娱乐互动交流领域。”
在过去的五六年时长,濮冠楠觉得在这个行业中有更多的破局者发生,例如快手视频、抖音视频,他们把更新的方式引入互动交流,“便是小视频,它像烈火一样,快速覆盖整个世界,不仅仅是中国,TikTok在国外也基本上是迅速教育了整个市场。”
濮冠楠觉得,下一代年青人需要更短时间的参加互动交流。之前的娱乐如游戏,很有可能玩几小时,但是对下一代年青人,可能更希望是在3min、5min,较多15分钟之内就会有一个完整的娱乐感受。“在这个时间段而言,我们认为它媒介与生俱来就应该是云,根据视频采集的形态,最适合的就是把人与游戏放在一起给予互动交流。”这便是濮冠楠在开创Pwnk项目地挑选身后对行业的认知。
那样这样云原生游戏设计理念中最核心的逻辑性即对用户分层,如观众们层、游戏玩家层、网络主播层。与此同时,以话剧表演方法,把舞台聚光灯打到游戏玩家的身上。与此同时,跟传统式游戏设计理念不一样的地方取决于,其需要以视频采集的方式设计游戏,将要游戏的理解成本费降得充足低,很容易参加。游戏玩家需要在十几秒,较多30秒以内了解游戏的核心玩法,否则就会失焦。
那么从云服务厂商的角度,刘力力觉得适用游戏行业有四个业务流程关键方位:算率和网络,数据库系统,大数据技术,机器学习算法和AI。
刘力力对澎湃新闻网(www.thepaper.cn)解释道,“算率和网络不用多说,因为如果没网络,毫无疑问无法做到低延时。与此同时,假如我们把一个现实的世界投射到一个虚幻世界中,就会发现所需要的测算至关重要。大家人们在看的时候从双眼获得的知识,实际上丢掉了周边97%的信息,仅有关注的地区才可以看得到。但如果想要虚拟的世界跟现实的世界一样,不太可能了解每一个人关心点在哪里,那就需要非常多的3D渲染,这一算率的要求是十分广大的。”
数据库系统得话,数据是全部公司运营的核心,除开买卖型数据库系统,也有健值数据库系统,有不同连接点之间关系的图数据库,也有根据时钟频率的数据库系统,基于区块链的数据表等。
第三个方位便是数据分析,刘力力觉得数据分析会是未来企业做市场拓展、找寻突破点的重要手段。若想找清晰客户满意度,并预估其未来的要求,就需要对大数据信息有非常精工细作的理解,需要从繁杂的业务数据中找到其中的裸钻,这并不是一件很容易的事。
最终乃是,AI和深度学习。
“人类是比较复杂的, 是无法取代的。人要让一个事情越来越更有趣,一个节目主持人很有可能就可以让任何一个互动交流具体内容越来越更有趣。未来元宇宙到来的时期,也许有一天AI会起到更好的辅助作用。乃至在参与游戏的过程中,我们会跟很多虚拟人物一起玩游戏。”濮冠楠说。
虚拟人物必须对人的仿真模拟,仿真模拟人的感觉、情感或是人对外界事物的反映。刘力力觉得,AI多是以后的元宇宙至关重要的支点,“仅有仿真模拟出去与众不同的情感、及其眼耳鼻舌身意的各种觉得,加上周围有真正的人在一起,这一沉浸式体验才能是真。”