本发明涉及一种应用混合现实技术的混合现实录播方法，适合于第三人称视角多人协同混合现实视频录播应用。
背景技术：
目前vr(virtualreality，虚拟现实)，ar(augmentedreality，增强现实)和mr(mixedreality，混合现实)第三人称视角多人协同混合现实视频录播应用中，相互之间无法互通，各种设备的用户不能与其它设备协同使用，在同一类型设备间第三人称视角多人协同混合现实视频录播的使用场景需消耗大量数据通信资源，体验效果较差等问题，从而以较低的数据量实现第三人称视角多人协同混合现实视频录播应用。
技术实现要素：
本发明的目的是针对目前vr(virtualreality，虚拟现实)，ar(augmentedreality，增强现实)和mr(mixedreality，混合现实)第三人称视角多人协同混合现实视频录播应用中，相互之间无法互通，各种设备的用户不能与其它设备协同使用，在同一类型设备间第三人称视角多人协同混合现实视频录播的使用场景需消耗大量数据通信资源，体验效果较差等问题，从而以较低的数据量实现第三人称视角多人协同混合现实视频录播应用。
本发明提供了一种基于计算机视觉的混合现实录播方法，首先建立空间三维数字模型和虚拟物体三维数字模型，混合现实录播装置扫描标志物，通过计算机视觉算法获取混合现实录播装置与标志物之间相对的6自由度位姿，通过标志物相对于空间三维数字模型的6自由度位姿计算出混合现实录播装置相对于空间三维数字模型的6自由度位姿，以确定混合现实录播装置的初始6自由度位姿，在混合现实录播装置移动过程中，通过计算机视觉算法实时改变其空间6自由度位姿，智能移动装置加载虚拟物体三维数字模型，其它智能移动装置将虚拟物体三维数字模型相对于空间模型的空间6自由度位姿通过网络发送至协同服务模块，协同服务模块收到后将对应的虚拟物体三维数字模型相对于空间三维数字模型的空间6自由度位姿发送至混合现实录播装置，混合现实录播装置能实时更新虚拟物体三维数字模型的空间6自由度位姿，混合现实录播装置将其摄像头所拍摄的现实图像与虚拟物体模型混合成视频，视频可保存至本地或通过有线或无线方式进行推送，从而以较低的数据量实现第三人称视角多人协同混合现实视频录播应用。
附图说明
图1是本发明的系统原理图。
具体实施方式
一种基于计算机视觉的混合现实录播方法，在图1中，首先建立空间三维数字模型和虚拟物体三维数字模型，空间三维数字模型和虚拟三维数字物体模型可部署在本地或网络，设计标志物，确定标志物与空间三维数字模型的关联，对于没有确定空间三维数字模型关联的标志物，标志物为原点，放置标志物，记录标志物相对于空间三维数字模型原点的6自由度位姿，如没有相对应的空间三维数字模型，标志物为原点，混合现实录播装置扫描标志物，通过计算机视觉算法获取混合现实录播装置与标志物之间相对的6自由度位姿，通过标志物相对于空间三维数字模型的6自由度位姿计算出混合现实录播装置相对于空间三维数字模型的6自由度位姿，以确定混合现实录播装置的初始6自由度位姿，在混合现实录播装置移动过程中，通过计算机视觉算法实时改变其空间6自由度位姿，智能移动装置加载虚拟物体三维数字模型，其它智能移动装置将虚拟物体三维数字模型相对于空间模型的空间6自由度位姿通过网络发送至协同服务模块，协同服务模块收到后将对应的虚拟物体三维数字模型相对于空间三维数字模型的空间6自由度位姿发送至混合现实录播装置，混合现实录播装置能实时更新虚拟物体三维数字模型的空间6自由度位姿，混合现实录播装置将其摄像头所拍摄的现实图像与虚拟物体模型混合成视频，视频可保存至本地或通过有线或无线方式进行推送，从而以较低的数据量实现第三人称视角多人协同混合现实视频录播应用。
图1所述的标志物，其特征在于，是图像或二维码。
图1所述的混合现实录播装置，其特征在于，配置有摄像头的智能移动装置，包括不同品牌型号的设备，安装不同软件，按照统一的通信协议与协同服务模块通信。
图1所述的智能移动装置，其特征在于，包括不同品牌型号的设备，安装不同软件，按照统一的通信协议与协同服务模块通信。
图1所述的协同服务模块，其特征在于，可部署在混合现实录播装置中，也可部署在其它智能移动装置中或其它独立的网络设备中。
1.一种基于计算机视觉的混合现实录播方法，其特征在于：首先建立空间三维数字模型和虚拟物体三维数字模型，空间三维数字模型和虚拟三维数字物体模型可部署在本地或网络，设计标志物，确定标志物与空间三维数字模型的关联，对于没有确定空间三维数字模型关联的标志物，标志物为原点，放置标志物，记录标志物相对于空间三维数字模型原点的6自由度位姿，如没有相对应的空间三维数字模型，标志物为原点，混合现实录播装置扫描标志物，通过计算机视觉算法获取混合现实录播装置与标志物之间相对的6自由度位姿，通过标志物相对于空间三维数字模型的6自由度位姿计算出混合现实录播装置相对于空间三维数字模型的6自由度位姿，以确定混合现实录播装置的初始6自由度位姿，在混合现实录播装置移动过程中，通过计算机视觉算法实时改变其空间6自由度位姿，智能移动装置加载虚拟物体三维数字模型，其它智能移动装置将虚拟物体三维数字模型相对于空间模型的空间6自由度位姿通过网络发送至协同服务模块，协同服务模块收到后将对应的虚拟物体三维数字模型相对于空间三维数字模型的空间6自由度位姿发送至混合现实录播装置，混合现实录播装置能实时更新虚拟物体三维数字模型的空间6自由度位姿，混合现实录播装置将其摄像头所拍摄的现实图像与虚拟物体模型混合成视频，视频可保存至本地或通过有线或无线方式进行推送，从而以较低的数据量实现第三人称视角多人协同混合现实视频录播应用。
2.如权利要求1所述的标志物，其特征在于，是图像或二维码。
3.如权利要求1所述的混合现实录播装置，其特征在于，配置有摄像头的智能移动装置，包括不同品牌型号的设备，安装不同软件，按照统一的通信协议与协同服务模块通信。
4.如权利要求1所述的智能移动装置，其特征在于，包括不同品牌型号的设备，安装不同软件，按照统一的通信协议与协同服务模块通信。
5.如权利要求1所述的协同服务模块，其特征在于，可部署在混合现实录播装置中，也可部署在其它智能移动装置中或其它独立的网络设备中。
技术总结