技术摘要：
本发明公开了一种基于信息融合的人脸抓拍与去重系统，包括：人脸检测模块、人脸自适应曝光调整模块、行人跟踪模块、属性评分模块和信息融合模块，人脸自适应曝光调整模块在可用范围内的人脸的对应关键点构成的子区域进行曝光分析，对兴趣人脸区域曝光；行人跟踪模块进  全部
背景技术：
随着物联网的普及，智能设备的应用越来越广泛，智能监控设备属于智能设备的 一种，主要是指智能摄像头或类似产品，已经越来越普遍地见诸日常生活。智能摄像头集成 了摄像组件、控制芯片、图像处理芯片、存储介质、WiFi组件以及音频组件等，出于成本和小 型化的考虑，这些组件都是轻量级的，功能相对单一。因而，智能监控设备通常只是用于摄 录视频和拍摄照片，无法在单机上实现复杂的图像处理功能。目前这种以智能摄像头为主 要代表的智能监控设备，自身并不能提供相关人机交互界面，由于其具备WiFi组件，通常借 助云端绑定技术将其与移动设备进行绑定，使两者关联于同一云端账号体系下的同一用户 账号，由此，用户借助移动设备上安装的应用程序，便可实现对智能监控设备的访问，实现 对智能监控设备所产生的音视频数据的访问，以及对智能监控设备进行配置和设置。 智能监控设备出于监控这一功能的体现，除了可以实施实时录像之外，还能依据 场景进行抓拍。典型的一个应用便是识别陌生人，并对陌生人的人脸图像进行抓拍。这一功 能同样可以通过移动设备提供的应用程序进行设置。 目前智能监控设备进行抓拍时，现有的智能摄像头将检测到的人脸直接上传到数 据库，该技术每帧检测当前的人脸，检测出的人脸通过网络上传到指定的服务器数据库中。 该方法缺点是同一个人脸会重复上传，大量占用不必要的带宽和数据库空间，而且重复的 人脸给后续的云端应用造成了大量运算需求，浪费云端计算资源。摄像头将检测到的人脸 多目标跟踪，每个跟踪的人脸上传第一张照片。虽然大大减少了带宽占用和服务器端的存 储和计算负载，但缺点是对于人脸遮挡，快速扭头移动后跟踪丢失仍会一个人上传多个人 脸照，且由于人脸没有筛选过，上传的有遮挡的、姿态大、模糊或者表情夸张的人脸不利于 做身份识别。摄像头检测人脸后做质量评分，选择超过门限的人脸提取特征，在摄像头上做 人脸聚类去重，一类相似人脸上传一张评分最高的人脸。该方法对于评分一直不过门限的 人，可能会没有上传图片，造成信息丢失。
技术实现要素：
针对现有技术中的缺陷，本发明实施例提供的一种基于信息融合的人脸抓拍与去 重系统、方法、终端及介质，能对抓拍后的人脸图像进行去重处理，节约计算资源，并能对人 脸跟踪，有利于身份识别。 第一方面，本发明实施例提供的一种基于信息融合的人脸抓拍与去重系统，包括： 人脸检测模块、人脸自适应曝光调整模块、行人跟踪模块、属性评分模块和信息融合模块， 所述人脸检测模块用于从抓拍的人脸图像中将每帧数据中的人脸位置框和关键 点信息检测出来； 4 CN 111553231 A 说　明　书 2/7 页 所述人脸自适应曝光调整模块用于对人脸尺寸信息筛选，在可用范围内的人脸的 对应关键点构成的子区域进行曝光分析，根据曝光情况调整摄像头曝光参数，对兴趣人脸 区域曝光； 所述行人跟踪模块用于对每帧数据进行人脸和行人检测，根据行人区域和人脸区 域进行身份信息关联；将每帧检测出来的行人通过re-id特征使用deep  sort方法进行跟踪 得到多条行人轨迹，行人轨迹包括人脸序列和re-id特征； 所述属性评分模块用于对人脸序列根据人脸属性进行加权评分，保留每条行人轨 迹上当前评分最高的人脸图像并提取人脸特征； 所述信息融合模块用于根据行人轨迹、re-id特征及人脸特征进行人脸相似度计 算，若相似度大于设定阈值就判定为同一个人，将行人轨迹始终时刻点记录到对应人脸信 息结构化队列中。 第二方面，本发明实施例提供的一种基于信息融合的人脸抓拍与去重方法，包括： 获取摄像头抓拍的人脸图像； 从抓拍的人脸图像中将每帧数据中的人脸位置框和关键点信息检测出来； 对人脸尺寸信息信息筛选，在可用范围内的人脸的对应关键点构成的子区域进行 曝光分析，根据曝光情况调整摄像头曝光参数，对兴趣人脸区域曝光； 对每帧数据进行人脸和行人检测，根据行人区域和人脸区域进行身份信息关联； 将每帧检测出来的行人通过re-id特征使用deep  sort方法进行跟踪得到多条行人轨迹，行 人轨迹包括人脸序列和re-id特征； 对人脸序列根据人脸属性进行加权评分，保留每条行人轨迹上当前评分最高的人 脸图像并提取人脸特征； 根据行人轨迹、re-id特征及人脸特征进行人脸相似度计算，若相似度大于设定阈 值就判定为同一个人，将行人轨迹始终时刻点记录到对应人脸信息结构化队列中。 第三方面，本发明实施例提供的一种智能终端，包括处理器、输入设备、输出设备 和存储器，所述处理器、输入设备、输出设备和存储器相互连接，所述存储器用于存储计算 机程序，所述计算机程序包括程序指令，所述处理器被配置用于调用所述程序指令，执行上 述实施例描述的方法步骤。 第四方面，本发明实施例提供的一种计算机可读存储介质，所述计算机存储介质 存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被处理器执行时使所 述处理器执行上述实施例描述的方法步骤。 本发明的有益效果： 本发明实施例提供的一种基于信息融合的人脸抓拍与去重系统、方法、终端及介 质，使用人脸检测结果调整摄像头曝光参数使得目标人脸区域的人脸曝光最佳避免了人脸 区域过暗或过曝光问题。通过人脸和行人做身份关联后，使用更鲁棒的行人跟踪来避免人 脸区域过小及运动时特征多变导致的人脸跟踪失效导致的人脸去重失效。通过一条轨迹上 的候选人脸过人脸属性评分模块，得到每条轨迹上唯一的最佳人脸并提取特征值，保证了 每条轨迹上保存的都是最佳人脸。通过行人轨迹在帧间的信息融合和re-id及人脸信息相 似度比较后的融合，进一步减少了不必要的重复人脸。通过设定阈值，避免人脸图像漏抓问 题。 5 CN 111553231 A 说　明　书 3/7 页 附图说明 为了更清楚地说明本发明