(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210279038.1 (22)申请日 2022.03.21 (71)申请人 北京达佳互联信息技 术有限公司 地址 100085 北京市海淀区上地西路6号1 幢1层101D1-7 (72)发明人 何永明　李涛　梅丰　 (74)专利代理 机构 北京中博世 达专利商标代理 有限公司 1 1274 专利代理师 申健 (51)Int.Cl. G06K 9/62(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01) G06V 10/74(2022.01) G06V 10/82(2022.01)G06V 10/764(2022.01) G06V 10/44(2022.01) (54)发明名称 信息检测方法、 装置、 电子设备以及存储介 质 (57)摘要 本公开关于一种信息检测方法、 装置、 电子 设备以及存储介质， 涉及数据处理技术领域。 本 公开实施例至少解决相关技术中， 由于分类模型 不准确， 导致检测同一对象 的不同信息表征方式 是否一致的结果不准确的问题。 该方法包括： 获 取目标对象的第一特征数据和第二特征数据； 根 据第一特征数据， 在预置对象集合中查找目标对 象对应的目标预置对象； 根据目标预置对象 的第 四特征数据和第二特征数据， 得到第二模态相似 度； 如果第二模态相似度大于第二阈值， 确定目 标对象对应的第一模态数据与 目标对象对应的 第二模态数据相匹配。 将目标对象的单一模态数 据分别比较， 以判断同一目标对象的不同模态数 据是否相匹配， 能够提高检测表征方式是否一致 的准确性。 权利要求书2页 说明书11页 附图4页 CN 114638307 A 2022.06.17 CN 114638307 A 1.一种信息检测方法， 其特 征在于， 包括： 根据第一单模态双塔模型， 获取目标对象的第一特征数据， 所述第一特征数据为所述 目标对象对应的第一模态数据的特 征数据， 所述目标对象是多媒体资源 对象； 根据第二单模态双塔模型， 获取所述目标对象的第二特征数据， 所述第二特征数据为 所述目标对象对应的第二模态数据的特 征数据； 根据所述第一特征数据， 在预置对象集合中查找所述目标对象对应的目标预置对象， 所述目标预置对象的第三特征数据与所述第一特征数据之间的第一模态相似度大于或等 于第一阈值， 所述第三特征数据为所述 目标预置对 象对应的第一模态数据的特征数据； 所 述预置对 象集合包括至少一个预置对 象， 所述预置对 象对应的第一模态数据的特征数据， 与所述预置对象对应的第二模态数据的特 征数据相匹配； 根据所述目标预置对象的第四特征数据和所述第 二特征数据， 得到所述目标预置对象 与所述目标对象之 间的第二模态相似度， 所述第四特征数据为所述目标预置对象对应的第 二模态数据的特 征数据； 在所述第二模态相似度 大于第二阈值的情况下， 确定所述目标对象对应的第 一模态数 据与所述目标对象对应的第二模态数据相匹配。 2.根据权利要求1所述的信 息检测方法， 其特征在于， 在所述目标预置对象的数量大于 1个的情况下， 所述根据所述目标预置对象的第四特征数据和所述第二特征数据， 得到所述 目标预置对象与所述目标对象之间的第二模态相似度， 包括： 根据每个所述目标预置对象的第四特征数据和所述第 二特征数据， 得到每个所述目标 预置对象与所述目标对象之间的第三模态相似度； 将每个所述目标预置对象与 所述目标对象之间的第 三模态相似度的平均值， 确定为所 述目标预置对象与所述目标对象之间的第二模态相似度。 3.根据权利要求1所述的信息检测方法， 其特征在于， 所述根据第一单模态双塔模型， 获取目标对象的第一特 征数据之前， 所述方法还 包括： 根据所述目标对象对应的第一模态数据的数据类型， 确定所述第一单模态双塔模型， 所述第一单模态双塔模型是根据第一样本数据训练得到的， 所述第一样本数据的数据类型 与所述第一模态数据的数据类型相同； 根据所述目标对象对应的第二模态数据的数据类型， 确定所述第二单模态双塔模型， 所述第二单模态双塔模型是根据第二样本数据训练得到的， 所述第二样本数据的数据类型 与所述第二模态数据的数据类型相同。 4.根据权利要求3所述的信息检测方法， 其特征在于， 所述根据所述第一特征数据， 在 预置对象集 合中查找所述目标对象对应的目标 预置对象之前， 所述方法还 包括： 根据所述第 一单模态双塔模型， 提取并存储所述预置对象集合中每个预置对象对应的 第一模态数据的特 征数据； 根据所述第 二单模态双塔模型， 提取并存储所述预置对象集合中每个预置对象对应的 第二模态数据对应的特 征数据。 5.根据权利要求1所述的信 息检测方法， 其特征在于， 所述在所述第 二模态相似度 大于 第二阈值的情况下， 确定所述目标对象对应的第一模态数据与所述目标对象对应的第二模 态数据相匹配之后， 所述方法还 包括：权　利　要　求　书 1/2 页 2 CN 114638307 A 2在所述预置对象集合中， 加入所述目标对象， 并记录所述第一特征数据和所述第二特 征数据。 6.根据权利要求1至5任一项所述的信息检测方法， 其特征在于， 所述第一模态数据为 以下任一项： 文本数据、 视频数据、 音频数据和图像数据； 所述第二模态数据为以下任一项： 文本数据、 视频 数据、 音频 数据和图像数据。 7.一种信息检测装置， 其特 征在于， 包括获取 单元、 查找单 元以及确定单 元； 所述获取单元， 用于根据第 一单模态双塔模型， 获取目标对象的第一特征数据， 所述第 一特征数据为所述目标对象对应的第一模态数据的特征数据， 所述目标对象是多媒体资源 对象； 所述获取单元， 还用于根据第 二单模态双塔模型， 获取所述目标对象的第 二特征数据， 所述第二特 征数据为所述目标对象对应的第二模态数据的特 征数据； 所述查找单元， 用于根据所述获取单元获取的第一特征数据， 在预置对象集合中查找 所述目标对象对应的目标预置对象， 所述目标预置对象的第三特征数据与所述第一特征数 据之间的第一模态相似度大于或等于第一阈值， 所述第三特征数据为所述目标预置对象对 应的第一模态数据的特征数据； 所述预置对 象集合包括至少一个预置对 象， 所述预置对 象 对应的第一模态数据 的特征数据， 与所述预置对象对应的第二模态数据 的特征数据相匹 配； 所述获取单元， 还用于根据 所述查找单元查找的目标预置对象的第四特征数据和所述 第二特征数据， 得到所述 目标预置对 象与所述 目标对象之间的第二模态相似度， 所述第四 特征数据为所述目标 预置对象对应的第二模态数据的特 征数据； 所述确定单元， 用于在所述获取单元获取的第二模态相似度大于第二阈值的情况下， 确定所述目标对象对应的第一模态数据与所述目标对象对应的第二模态数据相匹配。 8.一种电子设备， 其特 征在于， 包括： 处理器； 用于存储所述处 理器可执行指令的存 储器； 其中， 所述处理器被配置为执行所述指令， 以实现如权利要求1 ‑6中任一项所述的信息 检测方法。 9.一种可读存储介质， 其特征在于， 当所述可读存储介质中的指令被处理器执行时， 能 够实现如权利要求1 ‑6中任一项所述的信息检测方法。 10.一种计算机程序产品， 包括计算机程序/指令， 其特征在于， 所述计算机程序/指令 被处理器执行时实现如权利要求1 ‑6中任一项所述的信息检测方法。权　利　要　求　书 2/2 页 3 CN 114638307 A 3