(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210343702.4 (22)申请日 2022.04.02 (71)申请人 北京明略昭辉科技有限公司 地址 100000 北京市海淀区北三环西路25 号27号楼二层2020室 (72)发明人 范清　唐大闰　 (74)专利代理 机构 北京康盛知识产权代理有限 公司 11331 专利代理师 杨国勇 (51)Int.Cl. G06V 20/60(2022.01) G06V 20/52(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01) G06K 9/62(2022.01)G06V 10/764(2022.01) G06V 10/82(2022.01) (54)发明名称 基于图像识别的吸烟预警方法、 装置、 电子 设备和存 储介质 (57)摘要 本申请涉及深度学习技术领域， 公开了一种 基于图像识别的吸烟预警方法。 该基于图像识别 的吸烟预警方法包括： 同时获得同一场所的RGB 图像数据以及红外图像数据； 利用图像检测技术 处理RGB图像数据获得第一吸烟检测结果， 以及 处理红外图像数据获得第二吸烟检测结果； 在第 一吸烟检测结果和/或第二吸烟检测结果为存在 吸烟行为的情况下， 进行吸烟预警； 其中， 第一吸 烟检测结果以存在烟支目标表示存在吸烟行为， 第二吸烟检测结果 以存在烟头目标表示存在吸 烟行为。 采用该基于图像识别的吸烟预警方法可 提高了吸烟预 警的准确度。 本申请还公开一种基 于图像识别的吸烟预警装置、 电子设备和存储介 质。 权利要求书2页 说明书11页 附图3页 CN 114782937 A 2022.07.22 CN 114782937 A 1.一种基于图像识别的吸烟预警方法， 其特 征在于， 包括： 同时获得同一场所的RGB图像数据以及红外图像数据； 利用图像检测技术处理所述RGB图像数据获得第一吸烟检测结果， 以及处理所述红外 图像数据获得第二吸烟检测结果； 在所述第一吸烟检测结果和/或所述第二吸烟检测结果为存在 吸烟行为的情况下， 进 行吸烟预警； 其中， 所述第一吸烟检测结果以存在烟支目标表示存在 吸烟行为， 所述第二吸烟检测 结果以存在 烟头目标表示存在吸烟行为。 2.根据权利要求1所述的吸烟预警方法， 其特征在于， 处理所述RGB图像数据获得第一 吸烟检测结果， 包括： 提取所述RGB图像数据中的图像特 征； 组合所述图像特 征， 获得组合特 征； 对所述组合特 征进行分类处 理， 获得所述第一吸烟检测结果。 3.根据权利要求2所述的吸烟预警方法， 其特征在于， 对所述组合特征分类处理， 获得 所述第一吸烟检测结果， 包括： 对所述组合特 征分类进行 卷积处理， 获得第一卷积输出 结果； 利用第一尺寸的卷积核对所述第 一卷积输出结果进行三 次卷积处理， 获得第 二卷积输 出结果； 根据所述第二卷积输出 结果获得目标分类结果； 其中， 在用于获得所述第一吸烟检测结果的神经网络的预训练过程中， 利用第二尺寸 的卷积核对第一卷积输出结果进行两次卷积处理， 获得第三卷积输出结果， 再对所述第三 卷积输出结果进行分类处理获得目标分类结果， 再将所述第二尺寸调整为所述第一尺寸， 再利用RGB图像数据进行训练并应用； 所述第二尺寸大于所述第一尺寸， 所述第一吸烟检测结果包括所述目标分类结果。 4.根据权利要求3所述的吸烟预警方法， 其特征在于， 对所述组合特征分类处理， 获得 所述第一吸烟检测结果， 还 包括： 对所述第一卷积输出 结果进行 卷积处理， 获得第四卷积输出 结果； 根据所述第四卷积输出 结果获得目标有效性结果以及目标检测框； 其中， 所述第一吸烟检测结果包括所述目标有效性结果以及目标检测框 。 5.根据权利要求1所述的吸烟预警方法， 其特征在于， 处理所述红外图像数据获得第 二 吸烟检测结果， 包括： 利用第一卷积层对所述红外图像数据进行 卷积处理； 利用最大池化层对所述第一卷积层的输出进行最大池化处 理； 利用多个第二卷积层对所述 最大池化层的输出升维卷积处 理； 利用全局池化层对所述多个第二卷积层的输出进行全局池化处 理； 利用线性化层对所述全局池化层的输出进行线性化处理， 获得所述第二吸烟检测结 果。 6.根据权利要求1至5任一项所述的吸烟预警方法， 其特征在于， 在所述第一吸烟检测 结果和/或所述第二吸烟检测结果 为存在吸烟行为的情况 下， 进行吸烟预警， 包括：权　利　要　求　书 1/2 页 2 CN 114782937 A 2如果上一时刻获得的历史第一吸烟检测结果和当前时刻获得的当前第二吸烟检测结 果均为存在吸烟行为， 且所述历史第一吸烟检测结果的概率大于或等于第一设定概率， 所 述当前第二吸烟检测结果的概 率大于或等于第二设定概 率， 则对吸烟行为进行 预警； 其中， 所述第一设定概 率小于所述第二设定概 率。 7.根据权利要求6所述的吸烟预警方法， 其特 征在于， 还 包括： 如果所述历史第一吸烟检测结果为不存在吸烟行为， 所述当前第 二吸烟检测结果为存 在吸烟行为， 且所述当前第二吸烟检测结果的概率大于或等于第四设定概率， 则对吸烟行 为进行预警； 其中， 所述第四设定概 率大于所述第二设定概 率。 8.一种基于图像识别的吸烟预警装置， 其特 征在于， 包括： 第一获得模块， 用于同时获得同一场所的RGB图像数据以及红外图像数据； 第二获得模块， 用于利用图像检测技术处理所述RGB图像数据获得第一吸烟检测结果， 以及处理所述红外图像数据获得第二吸烟检测结果； 预警模块， 用于在所述第一吸烟检测结果和/或所述第二吸烟检测结果为存在 吸烟行 为的情况 下， 进行吸烟预警； 其中， 所述第一吸烟检测结果以存在烟支目标表示存在 吸烟行为， 所述第二吸烟检测 结果以存在 烟头目标表示存在吸烟行为。 9.一种电子设备， 包括处理器和存储有程序指令的存储器， 其特征在于， 所述处理器被 配置为在执行所述程序指 令时， 执行如权利要求 1至7任一项 所述的基于图像识别的吸烟预 警方法。 10.一种存储介质， 存储有程序指令， 其特征在于， 所述程序指令在运行时执行如权利 要求1至7任一项所述的基于图像识别的吸烟预警方法。权　利　要　求　书 2/2 页 3 CN 114782937 A 3