(19)国家知识产权局 (12)发明 专利 (10)授权公告 号 (45)授权公告日 (21)申请 号 202210223565.0 (22)申请日 2022.03.09 (65)同一申请的已公布的文献号 申请公布号 CN 114299596 A (43)申请公布日 2022.04.08 (73)专利权人 深圳联和智慧科技有限公司 地址 518000 广东省深圳市南 山区粤海街 道高新区社区科技南路16号深圳湾 科 技生态园11栋A2805 (72)发明人 杨翰翔　赖晓俊　 (74)专利代理 机构 广州博联知识产权代理有限 公司 44663 专利代理师 马天鹰 (51)Int.Cl. G06V 40/16(2022.01)G06V 20/17(2022.01) G06V 10/44(2022.01) G06V 10/75(2022.01) G06V 10/764(2022.01) G06K 9/62(2022.01) G06N 20/00(2019.01) (56)对比文件 US 2014072185 A1,2014.0 3.13 审查员 古志春 (54)发明名称 智慧城市人脸识别匹配方法、 系统及云平台 (57)摘要 本发明实施例提供一种智慧城市人脸识别 匹配方法、 系统及云平台， 通过获取所述无人机 对预设的被监控城市区域进行航拍得到的航拍 监控影像以及预先构建的人脸特征集 以及目标 人脸数据库， 并将所述航拍监控影像与所述人脸 特征集进行人脸识别匹配， 得到包括两个或两个 以上人脸特征信息的人脸关键特征序列， 然后将 所述人脸关键特征序列与所述目标人脸数据库 进行人脸识别匹配， 确定所述航拍监控影像是否 包含与所述目标人脸数据库中的人脸数据匹配 的航拍图像帧。 如此， 可显著提高人脸识别匹配 效率， 并进一步提升无人机航拍监控的应用效 果。 权利要求书5页 说明书13页 附图5页 CN 114299596 B 2022.06.07 CN 114299596 B 1.一种智慧城市人脸识别匹配方法， 应用于人脸识别匹配系统 的云平台， 其特征在于， 所述人脸识别匹配系统还包括与所述云平台通信连接且用于分别对目标监控场合进行航 拍监控的无 人机， 所述方法包括： 获取所述无人机对预设的被监控城市区域进行航拍得到的航拍监控影像， 所述航拍监 控影像包括多个航拍图像帧， 以及获取 预先构建的人脸特 征集以及目标 人脸数据库； 将所述航拍监控影像与所述人脸特征集进行人脸识别匹配， 得到包括两个或两个以上 人脸特征信息的人脸关键特 征序列； 将所述人脸关键特征序列与 所述目标人脸数据库进行人脸识别匹配， 确定所述航拍监 控影像是否包 含与所述目标 人脸数据库中的人脸数据匹配的航拍图像帧； 其中， 所述将所述航拍监控影像与所述人脸特征集进行人脸识别匹配， 得到包括两个 或两个以上 人脸特征信息的人脸关键特 征序列， 包括： 将所述航拍监控影像中的各所述航拍图像帧分别与所述人脸特征集进行匹配分析， 得 到各所述航拍图像帧分别与所述人脸特 征集之间的匹配结果； 根据各所述航拍图像帧对应的匹配结果， 以及各所述航拍图像帧的人脸描述， 对各所 述航拍图像帧进 行帧序调整， 根据帧序调整后的各所述航拍图像帧获得航拍图像帧离散队 列； 基于所述航拍图像帧离散队列获得关于所述人脸特征集的人脸关键特征序列， 所述人 脸关键特 征序列包括两个或两个以上 人脸特征信息； 所述将所述航拍监控影像中的各所述航拍图像帧分别与所述人脸特征集进行匹配分 析， 得到各 所述航拍图像帧分别与所述人脸特 征集之间的匹配结果， 包括： 分别将各所述航拍图像帧输入预先获得的人脸关键特征AI识别网络中， 基于所述预先 获得的人脸关键特征AI识别网络中的基于全局特征维度的特征识别匹配单元对各所述航 拍图像帧进行特征分类识别， 并将特征分类识别得到的图像分类特征分别与所述人脸特征 集进行特征匹配后输出 各所述航拍图像帧对应的匹配结果； 所述根据各所述航拍图像帧对应的匹配结果， 以及各所述航拍图像帧的人脸描述， 对 各所述航拍图像帧进 行帧序调整， 根据帧序调整后的各所述航拍图像帧获得航拍图像帧离 散队列， 包括： 分别将各所述航拍图像帧， 以及各所述航拍图像帧对应的匹配结果输入所述预先获得 的人脸关键特征A I识别网络中的航拍图像帧序调整 单元， 基于所述航拍图像帧序调整单元 对各所述航拍图像帧进行帧序调整， 获得所述航拍图像帧序调整 单元输出的局部特征维度 的第一融合特征描述， 所述第一融合特征描述中的各个局部航拍图像特征共同构成所述航 拍图像帧离 散队列； 所述基于所述航拍图像帧离散队列获得关于所述人脸特征集的人脸关键特征序列， 包 括： 将所述融合特征描述输入所述预先获得的人脸关键特征AI识别网络中的人脸关键特 征识别单元， 基于所述人脸关键特征识别单元进行关键特征分类识别， 获得所述人脸关键 特征识别单元输出 的所述人脸关键特征序列； 其中， 所述预先获得的人脸关键特征AI识别 网络是根据采样图像库训练得到的， 所述采样图像库中的采样图像包括标定匹配结果的航 拍采样图像帧， 所述标定匹配结果用于描述所述航拍采样图像帧与参考人脸特征集的匹配权　利　要　求　书 1/5 页 2 CN 114299596 B 2情况。 2.根据权利要求1所述的方法， 其特征在于， 将所述人脸关键特征序列与所述目标人脸 数据库进 行人脸识别匹配， 确定所述航拍监控影像是否包含与所述目标人脸数据库中的人 脸数据匹配的航拍图像帧， 包括： 根据各所述人脸特征信息分别与所述人脸特征集的匹配结果从所述人脸关键特征序 列中选取排序靠前的至少一个人脸特征信息作为待识别人脸特征信息； 并将 每个所述待识 别人脸特征信息与所述目标人脸数据库进 行人脸识别匹配， 确定所述航拍监控影像是否包 含与所述目标 人脸数据库中的人脸数据匹配的航拍图像帧； 或者 根据所述人脸关键特征序列中各所述人脸特征信息的排列顺序依次将各所述人脸特 征信息与所述目标 人脸数据库进行 人脸识别匹配。 3.如权利要求1所述的方法， 其特征在于， 所述根据各所述航拍图像帧对应的匹配结 果， 以及各所述航拍图像帧的人脸描述， 对各所述航拍图像帧进 行帧序调整， 根据帧序调整 后的各所述航拍图像帧获得航拍图像帧离 散队列， 包括： 根据各所述航拍图像帧对应的匹配结果， 以及各所述航拍图像帧的人脸描述， 对各所 述航拍图像帧进行分类， 得到 两个或两个以上航拍图像帧集； 对每个所述航拍图像帧集进行次序整理， 并分别对每个所述航拍图像帧集中的各所述 航拍图像帧进行帧序调整， 得到所述 航拍图像帧离 散队列； 其中， 所述根据各所述航拍图像帧对应的匹配结果， 以及各所述航拍图像帧的人脸描 述， 对各所述航拍图像帧进行分类， 得到 两个或两个以上航拍图像帧集， 包括： 分别根据 各所述航拍图像帧对应的匹配结果， 对各所述航拍图像帧的人脸描述进行特 征融合， 得到各 所述航拍图像帧的人脸特 征关键描述； 根据各所述航拍图像帧的人脸特征关键描述对各所述航拍图像帧进行分类， 得到两个 或两个以上航拍图像帧集； 所述对每个所述航拍图像帧集进行次序整理， 并分别对每个所述航拍图像帧集中的各 所述航拍图像帧进行帧序调整， 得到所述 航拍图像帧离 散队列， 包括： 根据每个所述航拍图像帧集所包含的航拍图像帧的数量， 对每个所述航拍图像帧集进 行次序整理； 针对每个所述航拍图像帧集， 根据 所述航拍图像帧集中各所述航拍图像帧的人脸描述 与所述航拍图像帧集的共性量化指标， 对所述航拍图像帧集中的各所述航拍图像帧进 行帧 序调整； 基于各所述航拍图像帧集之间的帧集排列 结果， 以及每个所述航拍图像帧集中各所述 航拍图像帧的帧序调整结果， 获得 所述航拍图像帧离 散队列。 4.如权利要求1所述的方法， 其特征在于， 所述分别将各所述航拍图像帧输入预先获得 的人脸关键特征A I识别网络中， 基于所述预先获得的人脸关键特征A I识别网络中的基于全 局特征维度的特征识别匹配单元对各所述航拍图像帧进行特征分类识别， 并将特征分类识 别得到的图像分类特征分别与所述人脸特征集进行特征匹配后输出各所述航拍图像帧对 应的匹配结果， 包括： 分别将各所述航拍图像帧输入所述特征识别匹配单元， 基于所述特征识别匹配单元中 的全局特征描述子单元将各所述航拍图像帧投影到 设定图像描述空间， 得到各所述航拍图权　利　要　求　书 2/5 页 3 CN 114299596 B 3