近日，佳能与 Balus 在由日本电视放送网株式会社和 ClaN Entertainment 主办的“Buzz Rhythm LIVE V 2023”活动中进行了技术合作，实现了现场真实艺人和虚拟歌手同台演绎。
佳能的体积视频技术从 100 台摄像机拍摄的图像中生成 3D 数据，可以从自由视角创建 360 度视频，就像使用带有透明摄像头的无人机（通常称为虚拟摄像头）在捕获的空间中拍摄一样。利用佳能能够在广泛的拍摄区域实时生成图像的能力，它主要用于体育和娱乐领域。
另一方面，Barus 提供的“虚拟直播技术”是基于 Unity 游戏引擎自行开发的，可实现实时 3DCG 直播。数十台虚拟摄像机可以捕获 3D 空间并实时切换，以生成系统内完成的直播视频，并且可以与外部设备链接，以实现与本地场地的每次制作同步的现场表演。
通过结合这些先进的视频技术，佳能与 Balus提供了融合真实和虚拟的全新视频体验服务。具体来说，佳能将实时拍摄真实艺人，并使用体积视频系统生成 3D 数据，而Balus 将通过动作捕捉生成 VTubers虚拟歌手。通过将每个 3D 数据导入Balus的虚拟实时系统并整合，可以使真实艺人和虚拟歌手出现在同一个 CG 空间中，而没有时差。因此，在利用 CG 独有的自由摄影和空间制作的同时，实现了高度沉浸式的现场音乐同步。
