杭州倚澜科技有限公司成立于2021年6月,是一家专注于扩展现实(XR)视频社交生态引擎的科技公司。公司的核心研发团队深耕三维视觉研究领域多年,具备扩展现实、虚拟数字人等技术应用领域的领先性和独特性。
倚澜科技聚焦于打造XR视频社交生态,为内容创作者提供智能、便捷、高性能的实时3D工具以及平台化技术服务。其推出的第一款产品“YIV”XR直播系统将为直播电商解决视频直播内容同质化问题,颠覆现有视频创作方式,打造多元化、沉浸式XR直播间。
倚澜科技在3D视觉领域已经获得了8项国家发明专利和6项软件著作,具备多场景、多尺度大的人体三维重建的研究与项目开发经验。公司已与多个领域赛道的雇主达成长期的战略合作关系,致力于提供“轻量化”、“大众化”和“价格合理”的虚拟化身及元宇宙相关产品,让科技走进每一个人的生活。
倚澜科技背靠清华大学信息科学与技术国家研究中心,首席科学家为清华博士、研究员,深耕三维视觉、虚实融合等相关底层技术。公司自研底层三维重构和交互引擎,在动作捕捉、实时动态三维重建、沉浸式光场视频等技术领域处于国际前沿地位。创始团队成员来自清华大学以及海外高校。
目前,倚澜科技已经自主研发并获得了包括实时动态三维重建、多视图三维重建、无标记运动捕捉采集与生成等28项前沿专利。这些专利技术和创新的产品解决方案将为倚澜科技在扩展现实(XR)视频社交领域的发展提供坚实的支撑和竞争优势。
MR混合现实直播系统
MetaS场景级虚实交互系统是一款混合现实(MR)直播工具,可以高效率、多元化、低延迟、低成本地为各种平台提供虚拟内容制作以及直播互动的解决方案。该系统采用了轻量高精的AR模式,使得创作者可以以极低的成本和极简的方式实现真实和虚拟的人、物品、空间进行虚实结合增强直播互动,为主播和直播用户创造沉浸式的直播体验。
MetaS曾为认养一头牛的官方旗舰店账号打造了全新的虚实交互直播间,这种创新的内容和营销方式不仅丰富了带货模式和互动玩法,也提升了品牌的关注度和话题量。通过数字人技术和虚实结合技术,MetaS能够基于品牌风格和吉祥物进行内容和营销上的创新,提供更加优质的直播体验。这种虚实交互的直播方式也可以推动直播行业的智能化和创新化发展。
数智人解决方案
数智人解决方案是一种基于全栈AI技术的创新解决方案,旨在将真实人物的形象、声音等特征以1:1的比例还原并复刻成虚拟形象,并通过在垂直领域创建具备推理和认知能力的数智人大脑,为企业提供在虚实融合世界中的交互中介,从而帮助企业实现业务模式的创新和升级。
METAH AI数智人系统是一种基于先进AI技术和计算机视觉技术的数字人解决方案,旨在为用户提供高度个性化的数字人体验。该系统通过ASR、NLP和TTS等技术,实现了数字人的听觉、思维和语言表达等功能,同时支持实时生成虚拟人口型、表情、动作等特征,可以为用户提供更加生动拟人的AI数智人。
METAH AI数智人系统通过整合当前最先进的AI技术,结合个性化编码和用户风格化形象与沟通模式,为用户打造专属于自己的数字人形象与沟通模式。此外,该系统还可以实时渲染超高清立体视频,为元宇宙分会场打造专有智能大会场景,并提供现场虚拟演讲的技术支持,为企业提供了全新的营销和展示方式。
数字人动捕系统
METAC动捕系统以单相机无标记动捕驱动数字人,首创XR空间互动模式,让每一位使用者在线下就能轻松触摸科技前沿,结合实际场景与虚拟场景创造元宇宙会议空间,打通由虚向实、由实向虚的双向通道,实现科技魅力和互动的飞跃。
无标记视觉动捕:无需绿幕,无需专业空间,无需穿戴动捕外设;单相机多人实时动作捕捉,驱动多个虚拟人,无需二次合成;单相机驱动高精度虚拟人,还原真人微表情、动作,求解自由度100 V.S。 1000,景深交互无限还原真实,极致视觉感受。
在论坛会议上,可以以虚拟形象和虚拟场景进行演讲,突破空间时间,真正进入元宇宙。也为虚拟主播提供了更加便捷便宜的东部方案,无需昂贵的惯性动捕设备,只需一枚摄像头,一台电脑,就能使虚拟主播“活”起来。
照片级物品重建解决方案
META R照片级物品重建解决方案可以通过自动化方式替代人工建模,并且可以在短时间内完成物品的高精度建模和渲染。这种解决方案可以大大解放人力成本,提高3D模型构建的效率,降低建模成本。
通过使用2D照片来重建复杂的三维场景,META R照片级物品重建解决方案可以大大提高物体重建的效率。这种解决方案采用高清特征提取匹配编码方式,可以消除重建毛边,并将重建分辨率提高到2db以上。这使得重建的模型看起来更加真实和生动。
此外,META R照片级物品重建解决方案还将NeRF技术高效地结合到了UE引擎中,实现了一种虚实渲染一体化的解决方案。这种解决方案可以创建更加真实和生动的3D模型和场景,从而为游戏、影视、虚拟现实、增强现实、在线购物等领域提供更多的可能性。
我们的观点
作为一家专注于计算机视觉和人工智能前沿技术的科技创业公司,倚澜科技致力于开发虚拟数字人驱动的扩展现实(XR)内容创作和互动技术引擎及相关的产品解决方案。公司在人、物、场三元虚实交互核心技术方面具有国际领先地位,掌握了RGBD动捕、实时动态重建、3D场景理解、神经渲染等关键技术点,并积累了深厚的数据和算法基础。
倚澜科技的技术研发能力十分强大,公司紧跟学术界前沿,不断将最新技术落地应用。同时,公司拥有深度学习算法的设计和优化能力,实现了高精度、快速和自适应的算法设计。这些算法被广泛应用于各种实际场景,帮助用户轻松实现各种虚拟数字人驱动技术。
除了虚拟数字人驱动技术外,倚澜科技还提供一系列相关产品解决方案,覆盖教育、医疗、金融、文化等多个领域。这些解决方案包括虚拟直播、虚拟培训、虚拟社交等,为用户提供了更加沉浸式的体验。例如,通过虚拟直播技术,用户可以与主播进行实时互动,感受到身临其境的视觉效果;虚拟培训则使用户可以在任何时间、任何地点进行培训,提高培训效率和效果;虚拟社交则打破了物理限制,用户可以随时随地与朋友进行互动。
在强有力的科研支撑基础上,倚澜科技已完成多项虚实融合核心技术的自研,希望倚澜科技能全力推动元宇宙技术规模化应用,帮助每一个人、每一个企业、每一个组织畅享元宇宙。