技术摘要：
本发明提供了一种基于人物形象实时渲染重建的混合现实通讯协作系统，包括体感器、MR眼镜、PC端、通信服务器，所述体感器和所述MR眼镜均与PC端连接，两个所述MR眼镜之间通过通信服务器连接。实施本发明的技术方案，引入体感器，通过体感器采集实时的人物形象三维化数据  全部
背景技术：
混合现实眼镜是采用混合现实技术，借助计算机图形绘制和三维显示技术在人眼 中显示出真实环境中不存在的虚拟对象，并通过传感技术将虚拟对象准确“放置”在真实环 境中，借助显示设备将虚拟对象与真实环境融为一体，并呈现给使用者一个感官效果真实 的新环境。 现有的基于混合显示眼镜的通信软件，能够通过摄像头的采集，将通信画面呈现 于一个平面之中，但无法将通信者的人物形象以三维重建的形式，导入混合现实眼镜中实 时渲染。通讯双方无法做到对混合现实场景中的三维虚拟物体进行交互。从而无法做到真 正的混合现实下的通讯协作。
技术实现要素：
为了解决上述技术问题，本发明中披露了一种基于人物形象实时渲染重建的混合 现实通讯协作系统，本发明的技术方案是这样实施的： 一种基于人物形象实时渲染重建的混合现实通讯协作系统，包括体感器、MR眼镜、PC 端、通信服务器，所述体感器和所述MR眼镜均与PC端连接，两个所述MR眼镜之间通过通信服 务器连接。 进一步地，所述体感器用于采集人体形象三维数据并将人体形象三维数据发送至 PC端，所述PC端根据所述人体形象三维数据建立人物三维化模型，所述PC端将所述人物三 维化模型数据导入到MR眼镜中，所述MR眼镜通过通信服务器将所述人物三维化模型数据传 输至另一个MR眼镜，所述另一个MR眼镜根据所述人物三维化模型数据显示出人体的三维形 象。 优选地，所述人体形象三维数据包括人体的深度信息和人物及人物服装的彩色信 息，所述人体的深度信息通过所述体感器的深度摄像头采集，所述人物及人物服装的彩色 信息通过所述体感器的彩色摄像头采集，所述PC端分别将所述人体的深度信息和所述人物 及人物服装的彩色信息转化为3D化数据和贴图信息，所述3D化数据和所述贴图信息用于实 时建立人物三维化模型。 优选地，所述体感器为Azure  Kinect  DK。 优选地，所述MR眼镜为Mircosoft  Hololens  MR。 实施本发明的技术方案可解决现有技术中的即时通信软件无法实现基于混合现 实下的对三维场景的通讯协作的技术问题；实施本发明的技术方案，引入体感器，通过体感 器采集实时的人物形象三维化数据，通过PC端实时建立人物三维化模型，并将人物三维化 模型数据发送给MR眼镜，MR眼镜通过通信服务器将人物三维化模型数据发送到另一个MR眼 3 CN 111599019 A 说　明　书 2/2 页 镜中实现远程传输，另一个MR眼镜根据人物三维化模型数据呈现三维人体形象，实现了混 合现实下的通讯协作的目的。 附图说明 为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现 有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本 发明的一种实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以 根据这些附图获得其他的附图。 图1为本发明实现混合现实下的通讯协作的流程示意图。