界面新闻记者 |彭新

近日，索尼中国研究院（RDC）面向媒体和合作伙伴展示了多项研究落地方案和“技术概念验证”，这也是该机构的研究成果首次大规模公开亮相。

其中一个项目“虚拟舞蹈实验室”，当参观者进入绿幕拍摄区，拍下自己的真实三维形象，佩戴动作捕捉设备后，即可以卡通人物形象出现在电视屏幕上，实现简单的动作捕捉效果。此外，借助索尼空间现实显示屏（一种裸眼3D显示设备），被记录的3D模型数据还可以通过屏幕“立体化”，同步参观者动作，实现类似科幻电影的效果。

另一个项目为“沉浸式触觉剧场”：在特制的地板上，配合电视上的演唱会等画面，实现音乐与地面震动的“共振”提高沉浸感，类似影院中一度流行的“4D电影”。据索尼介绍，这一方案集成了索尼研发的反馈振动技术。

除消费电子产品外，索尼在中国还涉足专业影视内容创作、游戏、影视动漫、音乐等，与内容关联较大，也奠定了索尼中国研究院的基调。据索尼中国研究院院长竹中幹雄介绍，元宇宙和移动出行是索尼中国研究院最关注的技术方向。

实际上，近两年兴起的“元宇宙”概念颇合索尼胃口。在索尼2022年5月提出的新财年战略中，索尼集团董事长、总裁兼CEO吉田宪一郎就表示，将强化旗下三大业务，分别是：面向娱乐业务领域的内容IP和直接面向消费者 (DTC) 的服务；聚焦虚拟世界和移动出行领域，创造新娱乐体验方向；以及传感技术和AI（人工智能）技术。

在中国，消费电子是索尼最大的一张标签，占据近半营收，但其仍希望靠内容吸引中国用户。“既然（索尼）已经在全球范围之内，通过娱乐业务实现了巨大的发展，那在中国我们也希望在娱乐方面加大力度，这也是今后发展的重点。”索尼中国总裁吉田武司对界面新闻表示。

作为在中国仍有大规模生产制造设施、研发投资的大型日本科技集团，索尼极为看重中国市场的研发力量。据竹中幹雄介绍，索尼中国研究院于2005年在北京设立了第一个实验室，随后相继设立深圳和上海实验室，并在研发方向上以区域特点和索尼业务方向进行细分，如上海集中了索尼旗下游戏与动漫领域企业，因此倾向于在互动娱乐领域展开合作；深圳所在的大湾区作为制造业基地，电子产业发达，适合结合索尼的传感器、机器人技术推进研发。

在索尼看来，仅拥有单点技术突破，而无法整合完成商品化，形成整套技术方案，那么价值有限。竹中幹雄表示，由索尼开发的动作捕捉和反馈振动两项技术均已实现商品化，前者的商品化产品被称为“mocopi”，是一种能捕捉身体动作并做成数字内容的传感器，将表情和身体动作数字化后，就可以借助智能手机、电脑轻松制作虚拟形象视频等。

“我们考虑把它应用于元宇宙当中，在元宇宙空间里为用户提供更丰富多彩的交互方式。除了视觉以外，还可以通过触觉反馈来增加用户的体验。”竹中幹雄称。

在过去，动作捕捉要在专用的房间内拍摄，配置绿幕、专用动作捕捉设备等，然后用电脑转换为数字内容，成本高企。使用mocopi，可以将室外场所拍摄的动作数字化，影像创作者的创作范围进一步扩大。同时，将技术进一步下放，也降低了使用门槛。

反馈振动技术则已实用化，用于PS5的游戏手柄“Dualsense”中。其可通过细腻的震动反馈模拟出游戏中枪支换弹、人物在不同表面的触感，大幅提高游戏沉浸感，也是PS5相对于其他游戏设备最大的差异化卖点。从最终用途来看，两项技术均形成整套解决方案和落地使用场景，是相对成功的技术。