产业

抖音、PICO超强扶植!可以实现AI+虚拟人+直播的“虚拟咔咔”来了

作为全球首款针对亚洲人创建的AI超写实虚拟人UGC创作平台,虚拟咔咔助力每个用户快捷进行超写实虚拟人内容创作,快速入驻元宇宙空间。

作为全球首款针对亚洲人创建的AI超写实虚拟人UGC创作平台,虚拟咔咔助力每个用户快捷进行超写实虚拟人内容创作,快速入驻元宇宙空间。

当今AI大模型时代下,数据算力及算法的不断提升让AI产业快速进化到AIGC产业。在发展虚拟人的过程中,引入AI技术,令虚拟人产业从技术层面得到质的飞升。居于实现数字孪生的当口,在虚拟直播中频繁亮相的各类AI虚拟人,受到广泛关注,恰逢布局元宇宙的关键时期,虚拟直播已经进入VR环境,走进元宇宙的大门。

AI+虚拟人+VR直播,这三种尖端技术在掀起一阵又一阵技术热潮后,在齐乐无穷的研发下深度融合,应用在虚拟咔咔软件中,直播的新时代正式揭开帷幕。在此基础上,抖音、PICO针对虚拟咔咔用户,推出超大力度扶植政策,细节往下看↓↓↓

虚拟咔咔赋能AI虚拟人

自由捏脸!无需设备!

虚拟咔咔是一款能够快捷且简便地创建高保真数字人类的工具,能自由捏脸,具有自主研发的超写实虚拟人制作技术,更无需穿戴动捕设备,只需手机摄像头即可实现微表情及全身动作复刻。

• AI能力自研——动作识别

虚拟咔咔目前能通过数字人动作捕捉技术,实现身体骨骼精准数据识别计算。通过单目RGB和RGB-D摄像头,分别记录并计算人体32根肢关节骨骼和双手40根指关节骨骼的空间姿态位置数据。

通过独家的“Web3.0虚拟人沉浸式交互体验技术”,让虚拟人具有真实人类感知和思维判断能力,可感知人类动作并作出相应回应。

• AI能力自研——面部捕捉

虚拟咔咔的面部动作捕捉技术,具有领先业内的数据计算水平,已经通过53个blendshape表情数据的计算,达到当前行业标杆。并且可通过面部捕捉,识别人类情感,精准识别人类表情,并分析表情的意义,以进行下一步回应,真正实现人机情感交流。

在动作识别与面部捕捉过程中,不断实现技术升级,初步完成了基于Human3.6M数据集的AI网络模型、IK反向运动学解算、基于卡尔曼滤波器的噪声过滤平滑等关键技术,让算力再上一个台阶。

• AI能力自研——声音合成

虚拟咔咔拥有“富有情感的声音合成技术”,通过自研的虚拟人分身技术解决方案,为AIGC赋能内容生产。能够实现虚拟人的情绪风格表达,让虚拟人拥有与人类相同的情感与情绪;同时可保留类似真人的音调和韵律,音色饱满、吐字清晰、充满感情。

• AI能力接入——ChatGPT

ChatGPT基于最新的深度学习技术,能对自然语言进行生成、理解和分析。虚拟咔咔已获得中国首家授权,将在虚拟人创作中接入中国版ChatGPT,在虚拟人运行中实现回答问题、模拟对话、生成文本、语言翻译、摘要生成等,达成24小时AI直播、智能对话、语言导航的智能操作。

• AI能力接入——Audio2face

Audio2face能实现将语言语音音轨输入后,实时生成面部动画,还能操纵虚拟人脸部、眼睛、嘴部、舌头、头部运动,让3D面孔栩栩如生。在Audio2face技术的加持下,虚拟咔咔虚拟人将更加生动。

抖音、PICO扶植虚拟咔咔用户

政策超Nice!快来薅羊毛!

当前虚拟咔咔已经完美接入抖音及PICO,使用虚拟咔咔制作的虚拟人可以在两个平台同步进行VR直播。

虚拟咔咔的虚拟人输出,具有高实时性,能实现超8K的清晰实时云渲染,在适配动作、面部捕捉与驱动时,延迟低于100ms。

同时,抖音和PICO为加速孵化虚拟直播,拓宽虚拟直播赛道,分别为虚拟咔咔用户推出了超吸引人的扶持政策:

• 抖音

抖音直播的公会主播通过虚拟主播认证后,即可参与专属任务,完成相应任务可获得70%以上奖励分成,分成比例基本上是抖音对旗下各垂类奖励数额最高的几类之一。

• PICO

PICO推出激励政策与相应活动,各主播有机会在主题活动中靠实力瓜分现金,还有利用VR及6DOF特性进行直播的活动,也能收获额外奖励,最高共可获近3万元现金。

虚拟咔咔0门槛操作,超写实捏脸,无需动捕设备。入驻抖音、PICO直播还有超多奖励!

快来薅羊毛吧,与你的虚拟人来一次元宇宙邂逅~

关键词

24快报
JSON抓取失败