我们以一款国内自主研发的媒体服务器——hecoos虚拟制作服务器为例,其完成一场xR项目需要的基本配置有:一套hecoos虚拟制作系统、一套摄像机追踪系统、一套实时渲染引擎、LED屏/投影碗幕。
实现xR技术的流程可分为5个环节:
1、摄像机追踪系统将真实摄像机的实时运动位置、姿态及镜头参数(x、y、z、pan、tilt、roll、FOV......)传输到hecoos虚拟制作服务器。
2、hecoos虚拟制作服务器对摄像机信息进行实时解析与处理,驱动实时渲染引擎渲染该视点所需的虚拟画面。
3、hecoos虚拟制作服务器接收虚拟画面并通过透视投射将渲染的虚拟画面输出至背景LED屏/投影碗幕,由摄像机完成最终采集。
4、将LED屏/投影碗幕外拓展空间中的虚拟内容叠加在镜头前,采用自动校色功能对所有虚拟画面分别进行颜色校正,达到背景画面颜色统一。
5、镜头合成后,即为观众在镜头前看到的最终影像——无论镜头如何移动,演员始终身处在符合正确透视关系的一整片广袤森林前。