(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111665616.7 (22)申请日 2021.12.3 0 (71)申请人 南京旭锐软件科技有限公司 地址 210012 江苏省南京市雨 花台区软件 大道109号 4栋601室 (72)发明人 王健　陈晓炬　李磊　 (74)专利代理 机构 北京润泽恒知识产权代理有 限公司 1 1319 代理人 苏培华 (51)Int.Cl. G06T 7/00(2017.01) G06N 3/04(2006.01) G06K 9/62(2022.01) G06V 10/774(2022.01) G06V 10/74(2022.01) (54)发明名称 缺陷检测方法、 装置、 设备及存 储介质 (57)摘要 本申请实施例公开了一种方法、 装置、 设备 及存储介质。 所述方法包括： 接收图像对； 所述图 像对包括： 正常类别对应的第一图像、 以及待检 测的第二图像； 利用特征提取网络， 确定所述第 一图像和所述第二图像分别对应的第一特征和 第二特征； 根据分类网络、 所述第一特征和所述 第二特征， 确定所述第一图像和所述第二图像 之 间的匹配结果； 所述特征提取网络和所述分类网 络为根据图像对样本训练得到； 在所述匹配结果 为匹配的情况下， 对所述匹配结果进行输出； 或 者， 在所述匹配结果为不匹配的情况下， 确定符 合异常条件的第二特征在所述第二图像中对应 的目标位置信息， 并对所述目标位置信息进行输 出。 本申请实施例可以提高缺陷检测的精度和效 率。 权利要求书2页 说明书12页 附图6页 CN 114418969 A 2022.04.29 CN 114418969 A 1.一种缺陷检测方法， 其特 征在于， 所述方法包括： 接收图像对； 所述图像对 包括： 正常类别对应的第一图像、 以及待检测的第二图像； 利用特征提取网络， 确定所述第 一图像和所述第 二图像分别对应的第 一特征和第 二特 征； 根据分类网络、 所述第一特征和所述第二特征， 确定所述第一图像和所述第二图像之 间的匹配结果； 所述特 征提取网络和所述分类网络为 根据图像对样本训练得到； 在所述匹配结果为匹配的情况下， 对所述匹配结果进行输出； 或者， 在所述匹配结果为 不匹配的情况下， 确定符合异常条件的第二特征在所述第二图像中对应的目标位置信息， 并对所述目标位置信息进行输出。 2.根据权利要求1所述的方法， 其特征在于， 所述特征提取网络包括： 孪生网络和特征 金字塔网络； 其中， 所述孪生网络的卷积网络包括： N个级别的卷积层； N为大于1的自然数； 所述卷积 网络包括： 所述第一图像对应的第一卷积网络、 以及所述第二图像对应的第二卷积网络； 所述特征金字塔网络与至少两个级别的卷积层相连， 用于对至少两个级别的卷积层的 输出进行融合。 3.根据权利要求1所述的方法， 其特 征在于， 所述第二特 征包括： 第二特 征图； 所述确定符合异常条件的第二特 征在所述第二图像中对应的目标位置信息， 包括： 在所述匹配结果为不匹配的情况下， 根据特征图的可视化方法， 确定符合异常条件的 第二特征在所述第二图像中对应的目标位置信息 。 4.根据权利要求1至3中任一所述的方法， 其特征在于， 所述符合异常条件的第二特征 为根据第一特 征与第二特 征之间的匹配度得到 。 5.根据权利要求1至3 中任一所述的方法， 其特征在于， 所述图像对样本包括： 第 一图像 样本、 第二图像样本、 以及对应的标签信息； 其中， 在第一图像样本和第二图像样本对应的 类别相同的情况下， 所述标签信息为第一标签； 在第一图像样本和第二图像样本对应的类 别不同的情况 下， 所述标签信息为第二标签。 6.根据权利要求5所述的方法， 其特征在于， 所述特征提取网络和所述分类网络的训练 过程包括： 特征提取网络根据所述图像对样本， 得到所述图像对样本对应的特 征对信息； 分类网络根据所述特 征对信息， 确定所述图像对样本对应的匹配信息； 根据所述匹配信 息与所述标签信 息之间的误差信 息， 进行所述特征提取网络和所述分 类网络的反向传播操作。 7.一种缺陷检测装置， 其特 征在于， 所述装置包括： 接收模块， 用于接收图像对； 所述图像对包括： 正常类别对应的第一图像、 以及待检测 的第二图像； 特征提取模块， 用于利用特征提取网络， 确定所述第一图像和所述第二图像分别对应 的第一特 征和第二特 征； 匹配模块， 用于根据分类网络、 所述第一特征和所述第 二特征， 确定所述第 一图像和所 述第二图像之 间的匹配结果； 所述特征提取网络和所述分类网络为根据图像对样本训练得 到；权　利　要　求　书 1/2 页 2 CN 114418969 A 2输出模块包括： 第一输出模块， 用于在所述匹配结果 为匹配的情况 下， 对所述匹配结果进行输出； 或者 第二输出模块， 用于在所述匹配结果为不匹配的情况下， 确定符合异常条件的第二特 征在所述第二图像中对应的目标位置信息， 并对所述目标位置信息进行输出。 8.根据权利要求7所述的装置， 其特征在于， 所述特征提取网络包括： 孪生网络和特征 金字塔网络； 其中， 所述孪生网络的卷积网络包括： N个级别的卷积层； N为大于1的自然数； 所述卷积 网络包括： 所述第一图像对应的第一卷积网络、 以及所述第二图像对应的第二卷积网络； 所述特征金字塔网络与至少两个级别的卷积层相连， 用于对至少两个级别的卷积层的 输出进行融合。 9.一种计算机设备， 其特征在于， 所述计算机设备包括处理器和存储器， 所述存储器中 存储有至少一条指令、 至少一段程序、 代码集或指令集， 所述至少一条指令、 所述至少一段 程序、 所述代码集或指令集由所述处理器加载并执行以实现如权利要求 1至6任一项 所述的 方法。 10.一种计算机可读存储介质， 其特征在于， 所述存储介质中存储有至少一条指令、 至 少一段程序、 代码集或指令集， 所述至少一条指令、 所述至少一段程序、 所述代码集或指令 集由处理器加载并执 行以实现如权利要求1至 6任一项所述的方法。权　利　要　求　书 2/2 页 3 CN 114418969 A 3