(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210279738.0 (22)申请日 2022.03.22 (71)申请人 南京熊猫电子制造有限公司 地址 210038 江苏省南京市栖霞区南京经 济技术开发区恒通大道1号 (72)发明人 殷永旸　贾庆生　朱广鹏　魏伟　 徐秋秋　 (74)专利代理 机构 南京天华专利代理有限责任 公司 32218 代理人 刘畅　夏平 (51)Int.Cl. G06T 7/00(2017.01) G06T 3/40(2006.01) G06V 10/44(2022.01) G06N 3/04(2006.01) (54)发明名称 一种超分辨 率元器件角度识别装置及方法 (57)摘要 本发明提供了一种超分辨率元器件角度识 别装置及方法， 对元器件的图像进行采集， 并对 采集到的目标元器件细 节特征进行放大， 再结合 直线拟合方法， 精确计算得到元器件贴装角度信 息， 并将元器件角度计算值与预设值进行比较， 自动判定待测元器件是否 符合测试要求。 本发明 的有益效果： 对于小封装的元器件， 本发明针对 AOI设备以及人眼都难以精确判定元器件贴装角 度， 检测精度较差， 很难满足生产和检测的问题， 采用图像超分辨率处理方法， 提高元器件的贴装 精度， 保证电路板运行稳定性。 权利要求书2页 说明书5页 附图3页 CN 114372984 A 2022.04.19 CN 114372984 A 1.一种超分辨 率元器件角度识别方法， 其特 征在于包括以下步骤： 步骤1： 获取 元器件的高分辨 率图片‑低分辨率图片样本； 步骤2： 以低分辨率图片为模型输入， 以高分辨率图片为模型输出， 建立图像超分辨率 神经网络深度学习模型； 步骤3： 采集目标 元器件图像； 步骤4： 目标 元器件图像预处 理获得目标 元器件低分辨 率图片； 步骤5： 目标元器件低分辨率图片输入图像超分辨率神经网络深度 学习模型， 获取目标 元器件高分辨 率图片； 步骤6： 将目标元器件高分辨率图片二值化并进行形态学处理， 保留目标元器件的边缘 信息； 将目标元器件的边缘点拟合出一条最优直线， 所述直线与水平方向的夹角即为 目标 元器件的角度。 2.根据权利要求1所述的方法， 其特征在于方法还包括步骤7： 基于目标元器件的角度 判断贴装误差是否小于误差允许值， 并将判断结果传输给 执行模块。 3.根据权利要求1所述的方法， 其特征在于方法还包括步骤8： 执行模块根据步骤7中的 判断结果控制下一环 节执行方式。 4.根据权利要求1所述的方法， 其特征在于步骤1中， 首先获取元器件的高分辨率图片 样本， 将高分辨 率图片转换为低分辨 率图片以获得低分辨 率图片样本 。 5.根据权利要求4所述的方法， 其特征在于 图像尺寸缩小方法为， 将每9个相邻像素点 抽取每3个像素点之间的中间像素点， 最终留下4个角点， 重复上述步骤直到图像尺寸满足 要求。 6.根据权利要求1所述的方法， 其特征在于步骤3中， 执行模块使用 传送带将待测电路 板移动至元器件图像采集模块工作区， 元器件图像采集模块的摄像头对目标元器件进 行图 像采集。 7.根据权利要求1所述的方法， 其特征在于步骤4中， 图像进行预处理： 删除与目标元器 件无关的背 景部分， 消除干扰因素， 保留目标元器件的轮廓和色彩信息， 得到目标元器件的 低分辨率图像。 8.根据权利要求1所述的方法， 其特征在于步骤6中， 通过图像轮廓拟合最优直线的方 法为， 令图像轮廓点 i到直线l距离为ri， 当 之和取最小值时， 直线 l为拟合最优直线， 其中 。 9.一种超分辨率元器件角度识别装置， 其特征在于装置包括元器件图像采集模块、 运 算和处理模块、 显示模块、 通信模块、 执 行模块； 元器件图像采集模块， 包括摄像头以及配套的图像传输线缆， 用于采集元器件图像， 并 传输给运 算和处理模块进行后续处 理； 运算和处理模块， 包括至少1个高性能神经网络处理器， 用于运行图像超分辨率处理算 法， 并且将算法结果传输给显示模块、 通信模块和执 行模块； 所述图像超分辨 率处理算法包括以下步骤：权　利　要　求　书 1/2 页 2 CN 114372984 A 2步骤1： 获取 元器件的高分辨 率图片‑低分辨率图片样本； 步骤2： 以低分辨率图片为模型输入， 以高分辨率图片为模型输出， 建立图像超分辨率 神经网络深度学习模型； 步骤3： 采集目标 元器件图像； 步骤4： 目标 元器件图像预处 理获得目标 元器件低分辨 率图片； 步骤5： 目标元器件低分辨率图片输入图像超分辨率神经网络深度 学习模型， 获取目标 元器件高分辨 率图片； 步骤6： 将目标元器件高分辨率图片二值化并进行形态学处理， 保留目标元器件的边缘 信息； 将目标元器件的边缘点拟合出一条最优直线， 所述直线与水平方向的夹角即为 目标 元器件的角度； 步骤7： 基于目标元器件的角度判断贴装误差是否小于误差允许值， 并将判断结果传输 给执行模块； 步骤8： 执 行模块根据步骤7中的判断结果控制下一环 节执行方式； 显示模块， 包括一个液晶显示器以及其配套的传输线缆， 通过传输线缆将从运算和 处 理模块中得到的算法结果实时显示在液晶显示器上； 通信模块， 包括无线网络通信单元， 用于访问网络， 将 从运算和处理模块得到的检测数 据传到云端； 执行模块， 包括传送带和机械臂， 用于元器件的传输， 并根据运算和处理模块的判定结 果进行后续控制流程的执行， 若接收到的结果合格， 元器件向下一环节进 行传输， 如果不合 格， 则单独 检出。权　利　要　求　书 2/2 页 3 CN 114372984 A 3