(19)国家知识产权局 (12)发明 专利 (10)授权公告 号 (45)授权公告日 (21)申请 号 202210262998.7 (22)申请日 2022.03.17 (65)同一申请的已公布的文献号 申请公布号 CN 114359553 A (43)申请公布日 2022.04.15 (73)专利权人 北京惠朗时代科技有限公司 地址 102600 北京市大兴区经济开发区盛 坊路2号5号楼3层3 01室 (72)发明人 王小伟　 (74)专利代理 机构 东营辛丁知联专利代理事务 所(普通合伙) 37334 专利代理师 康宁宁 (51)Int.Cl. G06V 10/25(2022.01) G06V 10/20(2022.01)G06V 10/44(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01) G06V 30/10(2022.01) (56)对比文件 CN 112990310 A,2021.0 6.18 CN 10713 3312 A,2017.09.0 5 CN 110245220 A,2019.09.17 CN 113553962 A,2021.10.26 CN 113177237 A,2021.07.27 WO 2021115490 A1,2021.0 6.17 审查员 韦佳黎 (54)发明名称 一种基于物联网的签章定位方法、 系统及存 储介质 (57)摘要 本发明涉及签章技术领域， 公开了一种基于 物联网的签章定位方法、 系统及存储介质， 包括： 获取目标文件的图像信息， 将所述的图像信息进 行预处理， 提取预处理后的目标文件图像信息的 感兴趣区域， 基于深度学习建立目标文件的图像 文字识别模 型并进行初始化训练， 将预处理后的 图像信息输入 所述图像文字识别模 型， 通过所述 图像文字识别模型确定图像信息中的目标签章 区域， 通过双目视觉系统获取所述目标签章区域 的中心坐标， 将所述中心坐标进行坐标变换后反 馈至签章控件， 通过所述签章控件实现签章的精 准覆盖。 本发明通过双目视觉系统实现标签章位 置的精确定位， 节省了定位时间， 提高了签章的 定位效率。 权利要求书3页 说明书11页 附图1页 CN 114359553 B 2022.06.03 CN 114359553 B 1.一种基于物联网的签章定位方法， 其特 征在于， 包括以下步骤： 获取目标文件的图像信息， 将所述的图像信息进行预处理， 提取预处理后的目标文件 图像信息的感兴趣区域； 基于深度 学习建立目标文件的图像文字识别模型并进行初始化训练， 将预处理后的图 像信息输入所述图像文字识别模型； 通过所述图像文字识别模型识别图像信 息中的关键词信 息， 根据所述关键词信 息获取 目标签章区域， 通过双目视 觉系统获取 所述目标签章区域的中心坐标； 将所述中心坐标进行坐标变换后反馈至签章控件， 通过所述签章控件实现签章的精准 覆盖； 所述的通过双目视 觉系统获取 所述目标签章区域的中心坐标， 具体为： 所述双目视 觉系统通过坐标变化进行 标定， 并进行畸变校正； 获取双目视觉系统中左右相机获取的图像信 息， 根据左右相机获取的图像信 息进行目 标签章区域特 征顶点坐标的读取； 通过左右相机获取的图像信息中的特征顶点坐标结合双 目视觉系统的视差获取特征 顶点的三维坐标； 根据所述特征顶点的三维坐标获取目标签章 区域中心点三维坐标， 将所述目标签章 区 域中心点 三维坐标反馈 到签章控 件实现签章的精准覆盖； 通过所述签章控 件实现签章的精准覆盖， 还 包括： 获取签章覆盖后图像信 息及签章控件中目标签章图像信 息， 通过所述签章覆盖后图像 信息获取签章实际覆盖位置， 根据目标文件中关键词信息获取签章期望覆盖位置； 将所述签章实 际覆盖位置与所述签章期望覆盖位置进行对比， 生成位置偏差， 判断所 述位置偏差是否大于位置偏差阈值， 若大于， 则根据所述 位置偏差生成修 正信息； 通过所述签章覆盖后图像信息及目标签章图像信息判断签章的完整性； 将签章覆盖后图像信 息与目标签章图像信 息对比获取图像偏差， 判断所述图像偏差是 否大于图像偏差阈值； 若大于， 则 证明签章覆盖后图像信 息存在残缺， 将对应目标文件进行作废标记， 同时获 取签章缺失区域， 判断所述签章缺 失区域是否处于目标签章区域， 若不处于， 则生成修正信 息； 通过所述修正信息对目标签章区域进行误差补偿。 2.根据权利要求1所述的一种基于物联网的签章定位方法， 其特征在于， 所述获取目标 文件的图像信息， 将所述图像信息进行 预处理， 具体为： 通过双目视觉系统获取含有目标文件的图像信 息， 将所述图像信 息进行基于小波变换 的图像降噪处 理； 将降噪处 理后的图像信息进行 灰化处理获取灰度图像； 通过Canny算子对所述灰度图像进行边缘检测， 将图像信息中的背景部分去除， 单独获 取完整的目标文件图像区域， 并将所述目标文件图像区域作为图像信息中的感兴趣区域。 3.根据权利要求1所述的一种基于物联网的签章定位方法， 其特征在于， 所述的基于深 度学习建立目标文件的图像文字识别模型并进行初始化训练， 具体为： 基于神经网络构建图像文字识别模型， 获取海量含有签章关键词的图像信 息作为初始权　利　要　求　书 1/3 页 2 CN 114359553 B 2数据集， 将初始数据集进行分组得到若干组训练集， 将若干组训练集导入图像文字识别模 型进行初始化训练， 得到第一次学习后的输出 结果； 根据第一次学习后的输出结果计算每组训练集的初始学习率， 将第 一次学习后的输出 结果再次导入图像文字识别模型， 根据初始学习率继续进行n次迭代学习至损失函数平稳； 获取图像文字识别模型第n次迭代学习后若干组训练集的输出结果， 根据若干组训练 集的输出结果计算数据偏差率， 判断若干组训练集的数据偏差率是否均小于预设的数据偏 差率阈值； 若小于， 则说明图像文字识别模型训练完毕， 通过所述图像文字识别模型进行目标文 件关键词的识别及关键词的位置确定 。 4.根据权利要求1所述的一种基于物联网的签章定位方法， 其特征在于， 所述的根据 所 述关键词信息获取目标签章区域， 具体为： 获取感兴趣区域中的关键词信 息， 根据所述关键词所在位置及留白区域确定目标文件 预留签章区域； 将签章尺寸信息与所述目标文件预留签章区域进行对比分析； 若所述签章尺寸信 息小于等于所述目标文件预留签章区域， 则将所述目标文件预留签 章区域作为目标签章区域； 若所述签章尺寸信 息大于所述目标文件预留签章 区域， 则根据 所述签章尺寸信 息与目 标文件预留签章区域的偏差对目标文件预留签章区域进行修正， 将修正后目标文件预留签 章区域作为目标签章区域。 5.一种基于物联网的签章定位系统， 其特征在于， 该系统包括： 存储器、 处理器， 所述存 储器中包括一种基于物联网的签章定位方法程序， 所述一种基于物联网的签章定位的方法 程序被所述处 理器执行时实现如下步骤： 获取目标文件的图像信息， 将所述的图像信息进行预处理， 提取预处理后的目标文件 图像信息的感兴趣区域； 基于深度 学习建立目标文件的图像文字识别模型并进行初始化训练， 将预处理后的图 像信息输入所述图像文字识别模型； 通过所述图像文字识别模型识别图像信 息中的关键词信 息， 根据所述关键词信 息获取 目标签章区域， 通过双目视 觉系统获取 所述目标签章区域的中心坐标； 将所述中心坐标进行坐标变换后反馈至签章控件， 通过所述签章控件实现签章的精准 覆盖； 所述的通过双目视 觉系统获取 所述目标签章区域的中心坐标， 具体为： 所述双目视 觉系统通过坐标变化进行 标定， 并进行畸变校正； 获取双目视觉系统中左右相机获取的图像信 息， 根据左右相机获取的图像信 息进行目 标签章区域特 征顶点坐标的读取； 通过左右相机获取的图像信息中的特征顶点坐标结合双 目视觉系统的视差获取特征 顶点的三维坐标； 根据所述特征顶点的三维坐标获取目标签章 区域中心点三维坐标， 将所述目标签章 区 域中心点 三维坐标反馈 到签章控 件实现签章的精准覆盖； 通过所述签章控 件实现签章的精准覆盖， 还 包括：权　利　要　求　书 2/3 页 3 CN 114359553 B 3