(19)国家知识产权局 (12)发明 专利 (10)授权公告 号 (45)授权公告日 (21)申请 号 202210699150.0 (22)申请日 2022.06.20 (65)同一申请的已公布的文献号 申请公布号 CN 114782756 A (43)申请公布日 2022.07.22 (73)专利权人 深圳新视智科技 术有限公司 地址 518000 广东省深圳市罗湖区莲塘街 道鹏兴社区鹏兴路2 号鹏基工业区710 栋六层 (72)发明人 刘清　 (74)专利代理 机构 广东灵顿知识产权代理事务 所(普通合伙) 44558 专利代理师 赖耀华 (51)Int.Cl. G06V 10/764(2022.01)G06V 10/80(2022.01) G06V 10/82(2022.01) G06V 10/40(2022.01) G06K 9/62(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01) G06T 7/00(2017.01) 审查员 祝丽业 (54)发明名称 基于特征融合的缺陷检测方法、 装置、 设备 及存储介质 (57)摘要 本发明实施例公开了一种基于特征融合的 缺陷检测方法、 装置、 设备以及存储介质， 其中， 所述方法包括： 获取待检测产品的多张不同视场 下采集的单场图像下的目标检测图像； 获取每张 目标检测图像的第一缺陷特征； 按照预设的单场 特征增强算法， 对每张目标检测图像的第一缺陷 特征进行第一特征增强融合处理， 得到第一融合 特征； 按照预设的多场特征融合算法， 对第一融 合特征进行第二特征融合处理， 得到第二融合特 征； 根据第二融合特征对待检测产品进行缺陷检 测， 得到缺陷检测结果。 另外， 本发明实施例还公 开了一种基于特征融合的缺陷检测采用本发明， 采用本发明实施例， 可充分利用每个视场的图像 信息， 提高缺陷检测的分类精度。 权利要求书5页 说明书14页 附图4页 CN 114782756 B 2022.10.04 CN 114782756 B 1.一种基于特 征融合的缺陷检测方法， 其特 征在于， 所述方法包括： 获取待检测产品的多张目标检测图像， 所述多 张目标检测图像为待检测产品在不同视 场下采集的单场图像； 按照预设的特 征提取算法， 分别获取每张目标检测图像的第一 缺陷特征； 按照预设的第 一特征增强算法， 对每张目标检测图像的第 一缺陷特征进行第 一特征增 强融合处理， 得到与所述待检测产品对应的第一融合特征； 其中， 所述第一特征增强算法为 单场特征增强算法； 按照预设的第二特征融合算法， 对所述第一融合特征进行第二特征融合处理， 得到与 所述待检测产品对应的第二融合特 征； 其中， 所述第二特 征融合算法为多场特 征融合算法； 根据第二融合特征对所述待检测产品进行缺陷检测， 得到与 所述待检测产品对应的缺 陷检测结果； 其中， 所述按照预设的第一特征增强算法， 对每张目标检测图像的第一缺陷特征进行 第一特征增强融合处 理， 得到与所述待检测产品对应的第一融合特 征的步骤， 还 包括： 对于每一个第一 缺陷特征分别执 行： 对于第i个第一 缺陷特征 ， 通过如下公式计算第一 缺陷特征 的第一映射特 征： 其中， 所述map1为第一map函数， 所述第一map函数为卷积函数或全连接函数； 所述第一 缺陷特征 的第一映射特 征包括 ； 对于第i个第一缺陷特征 ， 通过如下公式计算第j个第一缺陷特征 对第一缺陷特 征 产生的第一更新幅度特 征 ， 其中， ： 其中， avgpool表示自适应平均池化操作， F表示全连接或者是卷积操作， sigmoid为权　利　要　求　书 1/5 页 2 CN 114782756 B 2sigmoid激活函数， softmax为激活函数； reshape函数将矩阵进行维度变换的操作， 以使得 的维度与 一致， c为 的特征维度大小； 通过公式 计算第i个第一缺陷特征 的第一更新特征 ， 其中， 包括concat操作、 维度拼接操 作、 元素级别的加法操作、 元 素级别的乘法操作中的一个或多个， n 为第一缺陷特征的数量； 通过公式 计算第i个第一缺陷特征 的第一融合特征 ， 其中， map2为第二map函数， 第二map函 数包括1*1的卷积层或全连接层函数； reshape函数为将矩阵进行维度变换的操作， 将第二 map函数处 理后的结果 转换成与 维度相同的特 征； 其中， 所述按照预设的第二特征融合算法， 对所述第一融合特征进行第二特征融合处 理， 得到与所述待检测产品对应的第二融合特 征的步骤， 还 包括： 对于每一个第一融合特 征执行： 对于第i个第一融合特 征 ， 通过如下公式计算第一融合特 征 的第二映射特 征： 其中， 所述map3为第三map函数， 所述第三map函数1*1的卷积层或者是全连接层函数； 所述第二映射特 征包括 ； 对于第i个第一融合特征 ， 通过如下公式计算第一融合特征 的第二更新幅度特 征 ： 其中， 表示其他第一融合特征 对第i个第一融合特征 进行更新得到的特 征， ， softmax为激活函数， contact为特征拼接函数， 所述contact函数包括维度拼接权　利　要　求　书 2/5 页 3 CN 114782756 B 3