版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
地址100195北京市海淀区杏石口路甲18号(72)发明人张志达毛翔宇王维佳龚晨蔡书成邓钢唐燕飞有限公司11614GO6V20/62(2022.01)GO6N3/045(2023.01)GO6N3/094(2023.GO6N3/096(2023.01).2021,第21卷(第7期),67-70.本发明公开一种基于人工智能的证件质检未全部通过上述三项检测的证件输送至质检不模块2发证及翻页模块,用于将待质检的卡式证件输送至信息采集区,以及对待质检的本式证件进行翻页并输送至所述信息采集区;拍照模块,用于获取所述信息采集区内的证件的图像;芯片读取模块,用于获取所述信息采集区内的证件的芯片信息;打印信息识别模块,用于基于获取的证件图像获取所述证件的打印信息,所述打印信息包括文字信息和生物特征信息;条码识别模块,用于基于获取的证件图像获取所述证件的条码信息;信息比对模块,用于对所述芯片信息、所述打印信息和所述条码信息进行三者一致性检测;打印质量检测模块,用于基于获取的证件图像对通过所述三者一致性检测的证件进行打印质量检测;覆膜质量检测模块,用于基于获取的证件图像对通过所述打印质量检测的证件进行覆膜质量检测;收证模块,用于将未通过所述三者一致性检测、所述打印质量检测或者所述覆膜质量检测的证件输送至质检不合格区,以及将通过所述覆膜质量检测并无需进行下一步信息比对的证件输送至质检合格区;所述打印信息识别模块、所述条码识别模块、所述信息比对模块、所述打印质量检测模块和所述覆膜质量检测模块共同基于边缘计算设备实现;所述边缘计算设备基于预定的第一证件质量检测方法实现所述打印质量检测和所述覆膜质量检测;所述第一证件质量检测方法包括:基于预构建的图像方向检测模型检测输入的目标证件图像的方向是否为正,若否,将所述目标证件图像的方向调正;对方向为正的目标证件图像进行OCR识别,以获取目标文字的实际位置信息;根据所述目标文字的实际位置信息与预获取的所述目标文字的标准位置信息获取所述目标文字的打印偏移量;若所述目标文字的打印偏移量超出预定的打印偏移量阈值,则判断目标证件未通过打印位置偏移检测;基于预构建的图像语义分割模型检测输入的通过所述打印位置偏移检测的目标证件图像是否包含黑边或杂质,若是,则判断所述目标证件未通过黑边及杂质检测;基于预构建的迁移分类模型检测输入的通过所述黑边及杂质检测的目标证件图像是否存在文字和人像转印不全、覆膜不全或打印重影的问题,若是,则判断所述目标证件未通过文字和人像转印不全、覆膜不全及打印重影检测;基于预构建的目标检测网络模型检测输入的通过所述文字和人像转印不全、覆膜不全及打印重影检测的目标证件图像是否存在红条、色斑或色点,若是,则判断所述目标证件未将未通过所述红条、色斑及色点检测的目标证件标记为质检不合格,将通过所述红条、色斑及色点检测的目标证件标记为质检合格。2.根据权利要求1所述的基于人工智能的证件质检系统,其特征在于,所述拍照模块包3第一相机模块,用于分别在所述白光光源、所述紫外光源和第二相机模块,用于分别在所述白光光源、所述紫外光源和证件回退模块,用于将通过所述覆膜质量检测的本式护照回退至所述发证及翻页模所述发证及翻页模块还用于将回退的本式护照从个人资料页翻至签证页,并将所述本所述信息比对模块还用于对所述签证页打印信息以及在先获取的所述本式护照的芯所述收证模块还用于将未通过所述四者一致性检测的本式护照输送至所述质检不合根据提取到的所述标准打印图像的特征点和所述目标证件图像的特征点进行特征匹若检测到的相似度高于预定相似度阈值且计算出的缺陷面积小于预定的缺陷面积阈编码器GE(x),用于基于输入的目标证件图像获取解码器GD(z),用于基于输入的所述特征向量z和目标证件的芯片信息获取重构证件图编码器GE(x'),用于基于输入的重构证件图像获取特征向量z';若所述特征向量z与所述特征向量z'的向量差超出预定的向量差阈值,则判断所述目4标证件未通过所述打印质量检测。6.根据权利要求1所述的基于人工智能的证件质检系统,其特征在于,所述边缘计算设备还基于预定的第四证件质量检测方法实现所述打印质量检测;所述第四证件质量检测方法基于预构建的改进生成对抗网络模型实现;所述改进生成对抗网络模型基于数据增强的方式进行训练,所述改进生成对抗网络模型包括:重构子网络,用于将输入的目标证件图像重构为无异常证件图像;判别子网络,用于获取所述目标证件图像与所述无异常证件图像的差异,并基于该差异判断所述目标证件图像是否通过所述打印质量检测。7.一种基于人工智能的证件质检方法,其特征在于,基于权利要求1所述的证件质检系统实现;所述证件质检方法包括:将待质检的卡式证件输送至信息采集区,或者对待质检的本式证件进行翻页并输送至所述信息采集区;获取所述信息采集区内的证件的图像;获取所述信息采集区内的证件的芯片信息;基于获取的证件图像获取所述证件的打印信息和条码信息,所述打印信息包括文字信息和生物特征信息;对所述芯片信息、所述打印信息和所述条码信息进行三者一致性检测;基于获取的证件图像对通过所述三者一致性检测的证件进行打印质量检测;基于获取的证件图像对通过所述打印质量检测的证件进行覆膜质量检测;将未通过所述三者一致性检测、所述打印质量检测或者所述覆膜质量检测的证件输送至质检不合格区,以及将通过所述覆膜质量检测并无需进行下一步信息比对的证件输送至质检合格区。8.根据权利要求7所述的基于人工智能的证件质检方法,其特征在于,当所述本式证件为本式护照时,在所述基于获取的证件图像对通过所述打印质量检测的证件进行覆膜质量将通过所述覆膜质量检测的本式护照回退;将回退的本式护照从个人资料页翻至签证页,并将所述本式护照重新输送至所述信息采集区;获取所述信息采集区内的本式护照的签证页图像;基于获取的签证页图像获取签证页打印信息;对所述签证页打印信息以及在先获取的所述本式护照的芯片信息、个人资料页打印信将未通过所述四者一致性检测的本式护照输送至所述质检不合格区,以及将通过所述四者一致性检测的本式护照输送至所述质检合格区。5一种基于人工智能的证件质检系统及方法技术领域[0001]本发明属于证件质检领域,更具体地,涉及一种基于人工智能的证件质检系统及方法。背景技术[0002]现有的证件质检主要包括信息比对和打印覆膜质量检测两个环节。对于信息比对环节,需要人工将护照放到护照阅读机以及将证卡放到读写器上,这种方式每次只能获取一张证件的相关信息,最关键的信息比对工作需要通过人工来实现,且在完成信息比对后需要人工换卡,效率较低。对于打印覆膜质量检测环节,依然采用的是人工质检的方式,易受到人为疲劳的影响,易出错。总地来说,现有证件质检所涉及的信息比对和打印覆膜质量检测均基于人工的方式完成,不仅效率低,而且可靠度低。发明内容[0003]本发明的目的在于解决现有基于人工的证件质检方式效率低、准确率低的问题。[0004]为了实现上述目的,本发明提供一种基于人工智能的证件质检系统及方法。[0005]根据本发明的第一方面,提供了一种基于人工智能的证件质检系统,该系统包括以下功能模块:[0006]发证及翻页模块,用于将待质检的卡式证件输送至信息采集区,以及对待质检的本式证件进行翻页并输送至所述信息采集区;[0007]拍照模块,用于获取所述信息采集区内[0008]芯片读取模块,用于获取所述信息采集区内的证件的芯片信息;[0009]打印信息识别模块,用于基于获取的证件图像获取所述证件的打印信息,所述打印信息包括文字信息和生物特征信息;[0010]条码识别模块,用于基于获取的证件图像获取所述证件的条码信息;[0011]信息比对模块,用于对所述芯片信息、所述打印信息和所述条码信息进行三者一致性检测;[0012]打印质量检测模块,用于基于获取的证件图像对通过所述三者一致性检测的证件进行打印质量检测;[0013]覆膜质量检测模块,用于基于获取的证件图像对通过所述打印质量检测的证件进行覆膜质量检测;[0014]收证模块,用于将未通过所述三者一致性检测、所述打印质量检测或者所述覆膜质量检测的证件输送至质检不合格区,以及将通过所述覆膜质量检测并无需进行下一步信息比对的证件输送至质检合格区。6[0018]第一相机模块,用于分别在所述白光光源、所述紫外光源和所述红外光源下从下方对处于预定的旋转角度的证件进行拍照;[0019]第二相机模块,用于分别在所述白光光源、所述紫外光源和所述红外光源下从上方对处于预定的旋转角度的证件进行拍照。[0020]作为优选的是,在通过所述覆膜质量检测后,需要进行下一步信息比对的证件为本式护照;[0021]所述证件质检系统还包括:[0022]证件回退模块,用于将通过所述覆膜质量检测的本式护照回退至所述发证及翻页[0023]所述发证及翻页模块还用于将回退的本式护照从个人资料页翻至签证页,并将所述本式护照重新输送至所述信息采集区;[0024]所述拍照模块还用于获取所述信息采集区内的本式护照的签证页图像;[0025]所述打印信息识别模块还用于基于获取的签证页图像获取签证页打印信息;[0026]所述信息比对模块还用于对所述签证页打印信息以及在先获取的所述本式护照的芯片信息、个人资料页打印信息、条码信息进行四者一致性检测;[0027]所述收证模块还用于将未通过所述四者一致性检测的本式护照输送至所述质检不合格区,以及将通过所述四者一致性检测的本式护照输送至所述质检合格区。[0028]作为优选的是,所述打印信息识别模块、所述条码识别模块、所述信息比对模块、所述打印质量检测模块和所述覆膜质量检测模块共同基于边缘计算设备实现。[0029]作为优选的是,所述边缘计算设备基于预定的第一证件质量检测方法实现所述打印质量检测和所述覆膜质量检测;[0030]所述第一证件质量检测方法包括:[0031]基于预构建的图像方向检测模型检测输入的目标证件图像的方向是否为正,若[0032]对方向为正的目标证件图像进行OCR识别,以获取目标文字的实际位置信息;[0033]根据所述目标文字的实际位置信息与预获取的所述目标文字的标准位置信息获取所述目标文字的打印偏移量;[0034]若所述目标文字的打印偏移量超出预定的打印偏移量阈值,则判断目标证件未通过打印位置偏移检测;[0035]基于预构建的图像语义分割模型检测输入的通过所述打印位置偏移检测的目标证件图像是否包含黑边或杂质,若是,则判断所述目标证件未通过黑边及杂质检测;[0036]基于预构建的迁移分类模型检测输入的通过所述黑边及杂质检测的目标证件图像是否存在文字和人像转印不全、覆膜不全或打印重影的问题,若是,则判断所述目标证件未通过文字和人像转印不全、覆膜不全及打印重影检测;[0037]基于预构建的目标检测网络模型检测输入的通过所述文字和人像转印不全、覆膜不全及打印重影检测的目标证件图像是否存在红条、色斑或色点,若是,则判断所述目标证[0038]将未通过所述红条、色斑及色点检测的目标证件标记为质检不合格,将通过所述红条、色斑及色点检测的目标证件标记为质检合格。7[0039]作为优选的是,所述边缘计算设备基于预定的第二证件质量检测方法实现所述打印质量检测,所述第二证件质量检测方法包括:[0040]获取目标证件图像对应的标准打印图像;[0041]对所述标准打印图像和所述目标证件图像进行预处理及特征点提取;[0042]根据提取到的所述标准打印图像的特征点和所述目标证件图像的特征点进行特征匹配,得到所述标准打印图像与所述目标证件图像的形态学相减结果;[0043]对所述形态学相减结果进行相似度检测和缺陷面积计算;[0044]若检测到的相似度高于预定相似度阈值且计算出的缺陷面积小于预定的缺陷面积阈值,则判断目标证件通过所述打印质量检测。[0045]作为优选的是,所述边缘计算设备基于预定的第三证件质量检测方法实现所述打印质量检测;[0046]所述第三证件质量检测方法基于预构建的生成对抗网络模型实现;[0047]所述生成对抗网络模型包括:[0048]编码器GE(x),用于基于输入的目标证件图像获取特征向量z;[0049]解码器GD(z),用于基于输入的所述特征向量z和目标证件的芯片信息获取重构证件图像;[0050]编码器GE(x'),用于基于输入的重构证件图像获取特征向量z’;[0051]若所述特征向量z与所述特征向量z’的向量差超出预定的向量差阈值,则判断所述目标证件未通过所述打印质量检测。[0052]作为优选的是,所述边缘计算设备基于预定的第四证件质量检测方法实现所述打印质量检测;[0053]所述第四证件质量检测方法基于预构建的改进生成对抗网络模型实现;[0054]所述改进生成对抗网络模型基于数据增强的方式进行训练,所述改进生成对抗网络模型包括:[0055]重构子网络,用于将输入的目标证件图像重构为无异常证件图像;[0056]判别子网络,用于获取所述目标证件图像与所述无异常证件图像的差异,并基于该差异判断所述目标证件图像是否通过所述打印质量检测。[0057]根据本发明的第二方面,提供了一种基于人工智能的证件质检方法,该方法基于上述基于人工智能的证件质检系统实现,该方法包括以下步骤:[0058]将待质检的卡式证件输送至信息采集区,或者对待质检的本式证件进行翻页并输送至所述信息采集区;[0059]获取所述信息采集区内的证件的图像;[0060]获取所述信息采集区内的证件的芯片信息;[0061]基于获取的证件图像获取所述证件的打印信息和条码信息,所述打印信息包括文字信息和生物特征信息;[0062]对所述芯片信息、所述打印信息和所述条码信息进行三者一致性检测;[0063]基于获取的证件图像对通过所述三者一致性检测的证件进行打印质量检测;[0064]基于获取的证件图像对通过所述打印质量检测的证件进行覆膜质量检测;[0065]将未通过所述三者一致性检测、所述打印质量检测或者所述覆膜质量检测的证件8输送至质检不合格区,以及将通过所述覆膜质量检测并无需进行下一步信息比对的证件输送至质检合格区。[0066]作为优选的是,当所述本式证件为本式护照时,在所述基于获取的证件图像对通过所述打印质量检测的证件进行覆膜质量检测之后,还包括:[0067]将通过所述覆膜质量检测的本式护照回退;[0068]将回退的本式护照从个人资料页翻至签证页,并将所述本式护照重新输送至所述信息采集区;[0069]获取所述信息采集区内的本式护照的签证页图像;[0070]基于获取的签证页图像获取签证页打印信息;[0071]对所述签证页打印信息以及在先获取的所述本式护照的芯片信息、个人资料页打印信息、条码信息进行四者一致性检测;[0072]将未通过所述四者一致性检测的本式护照输送至所述质检不合格区,以及将通过所述四者一致性检测的本式护照输送至所述质检合格区。[0073]本发明的有益效果在于:[0074]本发明的基于人工智能的证件质检系统,通过发证及翻页模块将待质检的卡式证件输送至信息采集区,以及对待质检的本式证件进行翻页并输送至所述信息采集区;通过拍照模块获取所述信息采集区内的证件的图像;通过芯片读取模块获取所述信息采集区内的证件的芯片信息;通过打印信息识别模块基于获取的证件图像获取所述证件的打印信息;通过条码识别模块基于获取的证件图像获取所述证件的条码信息;通过信息比对模块对所述芯片信息、所述打印信息和所述条码信息进行三者一致性检测;通过打印质量检测模块基于获取的证件图像对通过所述三者一致性检测的证件进行打印质量检测;通过覆膜质量检测模块基于获取的证件图像对通过所述打印质量检测的证件进行覆膜质量检测;通过收证模块将未通过所述三者一致性检测、所述打印质量检测或者所述覆膜质量检测的证件输送至质检不合格区,以及将通过所述覆膜质量检测并无需进行下一步信息比对的证件输送至质检合格区。其中,打印信息识别模块、打印质量检测模块和覆膜质量检测模块均基于人工智能技术实现。[0075]根据以上内容可知,采用本发明的基于人工智能的证件质检系统,能够实现信息比对环节和打印覆膜质量检测环节的完全自动化,解放了人力,不仅具有更高的效率,而且[0076]本发明的基于人工智能的证件质检方法与上述基于人工智能的证件质检系统属于一个总的发明构思,故与上述基于人工智能的证件质检系统具有相同的有益效果,在此不再一一赘述。[0077]本发明的其它特征和优点将在随后具体实施方式部分予以详细说明。附图说明[0078]通过结合附图对本发明示例性实施方式进行更详细的描述,本发明的上述以及其它目的、特征和优势将变得更加明显,其中,在本发明示例性实施方式中,相同的参考标号通常代表相同部件。[0079]图1示出了根据本发明的实施例的一种基于人工智能的证件质检系统的结构框9[0080]图2示出了根据本发明的实施例的基于人工智能的证件质检方法的实现流程图;[0081]图3示出了根据本发明的实施例的另一种基于人工智能的证件质检系统的系统构具体实施方式[0082]下面将更详细地描述本发明的优选实施方式。虽然以下描述了本发明的优选实施方式,然而应该理解,可以以各种形式实现本发明而不应被这里阐述的实施方式所限制。相反,提供这些实施方式是为了使本发明更加透彻和完整,并且能够将本发明的范围完整地传达给本领域的技术人员。[0083]实施例:图1示出了本发明实施例的基于人工智能的证件质检系统的结构框图。参照图1,本发明实施例的基于人工智能的证件质检系统包括以下功能模块:[0084]发证及翻页模块,用于将待质检的卡式证件输送至信息采集区,以及对待质检的本式证件进行翻页并输送至所述信息采集区;[0085]拍照模块,用于获取所述信息采集区内[0086]芯片读取模块,用于获取所述信息采集区内的证件的芯片信息;[0087]打印信息识别模块,用于基于获取的证件图像获取所述证件的打印信息,所述打印信息包括文字信息和生物特征信息,生物特征信息包括人像信息和指纹信息;[0088]条码识别模块,用于基于获取的证件图像获取所述证件的条码信息;[0089]信息比对模块,用于对所述芯片信息、所述打印信息和所述条码信息进行三者一致性检测;[0090]打印质量检测模块,用于基于获取的证件图像对通过所述三者一致性检测的证件进行打印质量检测;[0091]覆膜质量检测模块,用于基于获取的证件图像对通过所述打印质量检测的证件进行覆膜质量检测;[0092]收证模块,用于将未通过所述三者一致性检测、所述打印质量检测或者所述覆膜质量检测的证件输送至质检不合格区,以及将通过所述覆膜质量检测并无需进行下一步信息比对的证件输送至质检合格区。[0096]第一相机模块,用于分别在所述白光光源、所述紫外光源和所述红外光源下从下方对处于预定的旋转角度的证件进行拍照;[0097]第二相机模块,用于分别在所述白光光源、所述紫外光源和所述红外光源下从上方对处于预定的旋转角度的证件进行拍照。[0098]再进一步地,本发明实施例中,在通过所述覆膜质量检测后,需要进行下一步信息比对的证件为本式护照;[0099]所述证件质检系统还包括:[0100]证件回退模块,用于将通过所述覆膜质量检测的本式护照回退至所述发证及翻页模块;[0101]所述发证及翻页模块还用于将回退的本式护照从个人资料页翻至签证页,并将所述本式护照重新输送至所述信息采集区;[0102]所述拍照模块还用于获取所述信息采集区内的本式护照的签证页图像;[0103]所述打印信息识别模块还用于基于获取的签证页图像获取签证页打印信息,所述签证页打印信息包括签证信息;[0104]所述信息比对模块还用于对所述签证页打印信息以及在先获取的所述本式护照的芯片信息、个人资料页打印信息、条码信息进行四者一致性检测;[0105]所述收证模块还用于将未通过所述四者一致性检测的本式护照输送至所述质检不合格区,以及将通过所述四者一致性检测的本式护照输送至所述质检合格区。[0106]再进一步地,本发明实施例中,所述打印信息识别模块、所述条码识别模块、所述信息比对模块、所述打印质量检测模块和所述覆膜质量检测模块共同基于边缘计算设备实现。[0107]具体地,本发明实施例中,发证及翻页模块用于批量地向信息采集区输送卡式证件或者本式证件。对于本式证件,需要先将本式证件翻至指定的页面,再将翻页后的本式证件输送至信息采集区。例如,当本式证件为本式护照时,需要先将本式护照翻至个人资料页,再将本式护照输送至信息采集区,以进行后续的个人信息比对和质量检测。当本式护照通过覆膜质量检测后被回退至发证及翻页模块时,发证及翻页模块还用于将本式护照从个人资料页翻至签证页,并将本式护照重新输送至信息采集区,以进行后续的签证信息比对。[0108]具体地,本发明实施例中,光源子模块包括白光光源模组、紫外光源模组和红外光源模组,证件旋转子模块采用持证机构实现,第一相机模块和第二相机模块均采用工业摄像机实现。本发明实施例中,白光光源模组、紫外光源模组和红外光源模组分别提供白光光源、紫外光源和红外光源,持证机构能够将证件多角度旋转。基于光源子模块、证件旋转子模块、第一相机模块和第二相机模块的配合工作,能够在白光光源、紫外光源和红外光源下对证件的正面和反面进行多角度拍照,以获取目标证件图像。本发明实施例中,每种光源下的拍照都留存供后续识别检测使用。持证机构可以多个角度旋转,因为证件个人信息页上覆有激光防伪膜有反光,使用角度旋转配合光源,方便检查出证件打印不完整、防伪膜覆膜不全或有拉痕的缺陷。[0109]具体地,本发明实施例中,打印信息识别模块采用OCR文字识别技术获取证件文字信息,条码识别模块采用条码识别技术获取证件条码信息,芯片读取模块支持BAC方式读取和连接加密机的方式读取。打印质量检测模块根据预定的不同光源下以及不同角度的证件图像检测证件表面的打印质量,覆膜质量检测模块根据预定的不同光源下以及不同角度的证件图像检测证件表面的覆膜质量。对于信息比对模块,在其进行三者一致性检测和四者一致性检测的过程中,还可以将预获取的后台数据库中申请人的制证数据加入其中,相应地,之前的三者一致性检测变为四者一致性检测,之前的四者一致性检测变为五者一致性检测。系列的边缘计算设备进行替换。本发明实施例中,发证及翻页模块包括发证子模块和翻页11子模块。边缘计算设备通过网络交换机连接到翻页子模块、光源子模块、证件旋转子模块、第一相机模块、第二相机模块和证件回退模块,通过USB接口连接到发证子模块、芯片读取模块和收证模块。所述证件质检系统还包括显示模块,显示模块与边缘计算设备通过HDMI数据线相连。[0111]具体地,本发明实施例中,边缘计算设备的操作系统选用针对深度学习检测进行加速。因软件运行涉及多种硬件设备驱动,在运行时,将部署好的一套系统打包封装为Docker镜像,将各个质检设备(如读写器、相机)的IP地址及标识ID写入配置文件,在需要修改的时候方便修改。在部署到其他设备时,使用生成好的Docker镜像在型文件使用tar命令进行加密和压缩。密钥加密写入配置文件,使用模型时先从配置文件读取加密的密钥,对密钥进行解密,使用密钥解压tar文[0112]进一步地,本发明实施例中,所述边缘计算设备基于预定的第一证件质量检测方法实现所述打印质量检测和所述覆膜质量检测;[0113]所述第一证件质量检测方法包括:[0114]基于预构建的图像方向检测模型检测输入的目标证件图像的方向是否为正,若否,将所述目标证件图像的方向调正;[0115]对方向为正的目标证件图像进行OCR识别,以获取目标文字的实际位置信息;[0116]根据所述目标文字的实际位置信息与预获取的所述目标文字的标准位置信息获取所述目标文字的打印偏移量;[0117]若所述目标文字的打印偏移量超出预定的打印偏移量阈值,则判断目标证件未通过打印位置偏移检测;[0118]基于预构建的图像语义分割模型检测输入的通过所述打印位置偏移检测的目标证件图像是否包含黑边或杂质,若是,则判断所述目标证件未通过黑边及杂质检测;[0119]基于预构建的迁移分类模型检测输入的通过所述黑边及杂质检测的目标证件图像是否存在文字和人像转印不全、覆膜不全或打印重影的问题,若是,则判断所述目标证件未通过文字和人像转印不全、覆膜不全及打印重影检测;[0120]基于预构建的目标检测网络模型检测输入的通过所述文字和人像转印不全、覆膜不全及打印重影检测的目标证件图像是否存在红条、色斑或色点,若是,则判断所述目标证[0121]将未通过所述红条、色斑及色点检测的目标证件标记为质检不合格,将通过所述红条、色斑及色点检测的目标证件标记为质检合格。[0122]以下对第一证件质量检测方法进行更为详细的说明:[0123]第一证件质量检测方法为基于分割、分类和目标检测网络的质检方法:[0124]1)对于证件方向判断,使用ResNet或ShuffleNet对图像进行分类,每个数字代表一种证件类型一个方向,例如:1代表港澳证正面,2代表港澳证正面180度旋转,3代表港澳证背面,4代表港澳证背面180度旋转,5代表护照正面,6代表护照正面180度旋转,7代表护照反面,8代表护照反面180度旋转。在训练阶段标记证件照片和方向,并对网络进行训练。前期使用样图对模型进行训练,后续部署模型进行识别判断。字的位置后,与该项文字标准的位置进行对比,计算文字打印的偏移量,如果大于阈值或者与其他预打印信息重合,则认为该项文字有打印偏差。[0126]3)对于证件质量检测:对于黑边和杂质类型的图片使用图像语义分割网络用于训练分割网络。语义分割模型可以识别人像、底纹、个人信息、防伪膜以及杂质和黑边类别信息,对于分割出杂质和黑边,则判断证件不合格。对于紫外光下的覆膜图片也是用分类网络,区分覆膜完整及覆膜不完整的图片。[0127]4)对于文字和人像转印不全、覆膜不全及重影的图片,使用迁移分类网络CDAN,该图像分类网络基于迁移学习,可以提高分类的准确率。在训练阶段,人工标记好正常图片和文字和人像打印不全、覆膜不全、打印重影的图片信息用于训练分类网络。该网络用于区分正常图片和文字和人像打印不全、覆膜不全及打印重影的图片,对于人像和文字打印不完整、打印重影的图片判断证件不合格。在前期训练模型时将正常和质量异常的图片进行分[0128]5)对于打印出现红条、色斑及色点的证件,使用目标检测网络标注出缺陷的情况,使用FCOS目标检测网络对缺陷进行检测并显示。在前期训练模型将有杂质等异常情况的图片进行标注,提供网络进行模型训练。[0129]在训练模型时,因部分缺陷证件样本比较少,使用数据增强集合自动标注的方式增加样本数量,数据增强的方式包括,自动在证件随机位置生成杂质、色斑及色点、增加反照片变形、照片方向随机旋转、颜色扰动和加入噪声等方式。[0130]作为一种可选的方式,本发明实施例中,所述边缘计算设备基于预定的第二证件质量检测方法实现所述打印质量检测,所述第二证件质量检测方法包括:[0131]获取目标证件图像对应的标准打印图像;[0132]对所述标准打印图像和所述目标证件图像进行预处理及特征点提取;[0133]根据提取到的所述标准打印图像的特征点和所述目标证件图像的特征点进行特征匹配,得到所述标准打印图像与所述目标证件图像的形态学相减结果;[0134]对所述形态学相减结果进行相似度检测和缺陷面积计算;[0135]若检测到的相似度高于预定相似度阈值且计算出的缺陷面积小于预定的缺陷面积阈值,则判断目标证件通过所述打印质量检测。[0136]以下对第二证件质量检测方法进行更为详细的说明:[0137]第二证件质量检测方法为基于特征点提取的证件质检方法:个人信息生成样图即完整的打印文件,并将空白证件的底纹结合个人信息样图,生成待比较的打印标准图,用来与实际证件进行比对。第一步进行图像特征检测,使用SURF算法提取证件图像的特征点,形成特征描述。第二步进行特征匹配,粗筛选通过欧氏距离作为度量,精筛选使用随机抽样一致性(RANSAC)算法剔除匹配点中的外点,即错误匹配点。第三步使用仿射变换将标准图与制作的证件图像配准。最后做图像差分,打印不完整的部分会在图像差分结果中出现,将结果进行相似度检测以及轮廓检测并计算缺陷面积。如果比对相似度高于预设的阈值,且形态学相减的结果小于预定的阈值面积的差异,则判断为正常证件,否则判断为缺陷证件。这样可以将人像、文字打印错误和打印内容缺失的情况检测出来。[0139]作为一种可选的方式,本发明实施例中,所述边缘计算设备基于预定的第三证件质量检测方法实现所述打印质量检测;[0140]所述第三证件质量检测方法基于预构建的生成对抗网络模型实现;[0141]所述生成对抗网络模型包括:[0142]编码器GE(x),用于基于输入的目标证件图像获取特征向量z;[0143]解码器GD(z),用于基于输入的所述特征向量z和目标证件的芯片信息获取重构证件图像;[0144]编码器GE(x'),用于基于输入的重构证件图像获取特征向量z';[0145]若所述特征向量z与所述特征向量z’的向量差超出预定的向量差阈值,则判断所述目标证件未通过所述打印质量检测。[0146]以下对第三证件质量检测方法进行更为详细的说明:[0147]第三证件质量检测方法为基于生成对抗网络的证件质检方法:[0148]针对缺陷样本少,正常样本多的情况,考虑使用生成对抗网络来对证件进行质检,生成对抗网络包括:[0149]1)生成网络:由编码器GE(x)和解码器GD(z)构成,对于送入图像x经过编码器GE(x)得到向量z,向量z结合读取证件芯片获取的个人基本信息、人像和指纹等信息经过解码器GD(z)得到x的重构数据x’。[0150]2)判别器D:对于原始图像x判为真,重构图像x’判为假,从而不断优化重构图像与[0151]3)编码器GE(x’):对重构图像x’再做编码,得到重构图像x’的向量z’。[0152]在训练阶段,整个模型均是通过正常证件样本做训练,使用证件芯片中的个人信息与证件扫描照片作为输入,在个人信息的基础上增加证件底纹和防伪膜图像,使用解码器GD(z)生成重构照片。不断训练,以减小重构图像与原始图像的差距。[0153]在质检时,使用x与x’两张图像的图像形态学差异计算出缺陷的位置和大小,当z[0154]作为一种可选的方式,本发明实施例中,所述边缘计算设备基于预定的第四证件质量检测方法实现所述打印质量检测;[0155]所述第四证件质量检测方法基于预构建的改进生成对抗网络模型实现;[0156]所述改进生成对抗网络模型基于数据增强的方式进行训练,所述改进生成对抗网络模型包括:[0157]重构子网络,用于将输入的目标证件图像重构为无异常证件图像;[0158]判别子网络,用于获取所述目标证件图像与所述无异常证件图像的差异,并基于该差异判断所述目标证件图像是否通过所述打印质量检测。[0159]以下对第四证件质量检测方法进行更为详细的说明:[0160]第四证件质量检测方法为基于改进生成对抗网络的证件质检方法:[0161]针对缺陷样本不易获取,正常样本较多的情况,需要使用正常样本来生成异常样本供模型训练使用,考虑使用改进的生成对抗网络来对证件进行质检,其中,改进的生成对抗网络包括重构子网络、判别器子网络和数据增强模块。以下分别对重构子网络、判别子网络和数据增强模块进行说明:[0162]数据增强模块:主要用于从正常图像生成缺陷图像供模型训练使用。数据增强模块用于在正常样本I图像上生成缺陷,并将生成的缺陷图片I给重构子网络作为输入,来训练重构子网络。生成缺陷图像的步骤如下:[0163]1)首先使用柏林噪声生成一张噪音图P。[0164]2)根据一个随机生成的阈值对噪音图P做二值化操作,得到映射图M。[0165]3)从一个与证件不相关的数据集获取一张异常纹理图像A。[0166]4)从数据增强操作集里面选取2种数据增强操作对异常纹理图像A进行数据增强。[0167]5)训练数据包括正常图像I,生成的异常图像I以及异常掩码图像M射图M与原图I点乘再乘以混合系数1-β;经过数据增强的图像A与映射图M做矩阵点乘再乘[0171]最终得到经过数据增强的异常图像I。[0172]重构子网络:由编码器和解码器组成。重构子网络用于检测缺陷图片中的异常,其输入是缺陷图片I,网络并将其重建为正常图片I,使重建图片I尽量与正常图片I一致,减一部分是SSIMloss(LssI)计算公式如下:[0174]Lrec(I,[0176]判别子网络:通过检测重建图像与输入图像的区别来定位缺陷。判别子网络使用U-Net架构。判别子网络的输入I是重建子网络的输出I和输入图像I。判别子网络检查图像I与I的差异。如果输入图像为异常图像,则I与I在异常区域的差别较大,可以根据差异来对缺陷进行定位和分割。判别子网络自动学习I与I的距离度量。判别子网络输出异常分数映射M。与图像I大小一致。判别子网络的损失Lseg主要使用平衡交叉熵函数(balancedcrossentropy)来增强异常分割的准确性和健壮性。[0177]本方法的总损失由两部分构成:重建损失和缺陷分割损失:[0179]M,M分别是判别子网络输出的异常分割图和数据集里面正确打标记(groundtruth)的异常分割图。值滤波进行平滑,再经过最大池化层,最后通过全连接层确定检测结果。[0181]具体地,本发明实施例中,可以对第一证件质量检测方法、第二证件质量检测方法、第三证件质量检测方法与第四证件质量检测方法进行有选择地组合使用,只要能够实现打印质量检测和覆膜质量检测即可。[0182]本发明实施例的基于人工智能的证件质检系统具有以下有益效果:[0183]1)使用一台质检设备集成证件及护照的个人信息页、签证页的检测,对卡式证件的个人信息和签注的检测。可以对证件的打印信息,包括个人信、签证或签注信息、二维码信息、芯片信息、证件打印和覆膜质量进行一站式检测,整合多种质检功能,提高了质检的[0184]2)在对证件质量进行检测时使用了多种光源,结合持证机构旋转多角度,方便对[0185]3)质检和识别模型使用Docker进行部署,可以适配硬件设备的多种驱动,以及保持软件开发库的版本一致,同时方便部署环境的复制和扩展。了程序和模型的安全行。[0187]5)使用业界领先的自主研发的深度学习的方法,根据不同的检测功能使用不同类型的网络模型进行识别和检测。证件打印覆膜质量的质检功能的网络模型包括目标检测,图像分类,图像分割方法对证件打印质量和覆膜质量进行检测,替代了人工操作,提高了质检效率。使用自研的OCR和打印位置检测方法提高证件打印信息的核验能力。使用ShuffleNET对证件方向进行识别,方便质检判断和文字识别。[0188]6)使用JETSONXAVIERNX边缘计算设备替代工控机,同时J力,可以提高基于深度学习质检功能的运行速度,降低设备成本,减小设备体积,减少对服务器的依赖。[0189]7)使用基于改进的生成对抗网络的证件质检方法检测证件质量缺陷,针对证件缺陷样本较少的问题,训练检测网络,同时提高[0190]8)可以对证件的打印信息,包括个人信息,签证或签注信息,二维码信息,芯片信息,证件打印和覆膜质量进行一站式检测,整合多种质检功能,提高了质检的完整性,丰富了质检功能。[0191]9)使用深度学习的方法对证件打印、覆膜质量和打印信息进行检测,替代了人工操作,提高了质检效率和识别准确率。[0193]11)解决证件缺陷样本不易获取的问题,使用正常证件样本图像结合异常图像生成器来生成缺陷图像,最后训练识别网络。[0194]相应地,在上述基于人工智能的证件质检系统的基础上,本发明实施例还提出了一种基于人工智能的证件质检方法。图2示出了本发明实施例的基于人工智能的证件质检方法的实现流程图。参照图2,本发明实施例的基于人工智能的证件质检方法包括以下步[0195]S100、将待质检的卡式证件输送至信息采集区,或者对待质检的本式证件
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 六年级数学上册知识点复习
- 六年级语文《凡卡》练习题(12篇)
- 2026届辽宁省辽阳市灯塔市重点名校中考英语五模试卷含答案
- 广东省深圳大鹏新区达标名校2026届中考语文模拟试题含解析
- 企业人才引进竞业禁止合同(2024年版)
- 2026 学龄前自闭症早期干预感统课件
- 地理-2026届长春高三下三模
- 2026 学龄前自闭症情绪疏导课件
- 2026 学龄前自闭症家校训练课件
- 工程信号与系统(第2版)课件 第三章离散系统的时域分析
- 2026云南玉溪通海县供销合作社社有企业招聘4人考试参考题库及答案解析
- 建筑工程进场材料、构配件和设备质量控制工作标准
- JCT908-2013 人造石的标准
- 园林植物病虫害防治高职全套完整教学课件
- 医用内窥镜冷光源产品技术要求深圳迈瑞
- 吉利并购沃尔沃的协同效应
- 中大国际九号
- LY/T 3256-2021全国优势乔木树种(组)基本木材密度测定
- GB/T 10857-2005S型和C型钢制滚子链条、附件和链轮
- 高大支模架工程监理实施细则
- 科技论文写作与学术规范
评论
0/150
提交评论