CN113870412B 一种航空场景图像的处理方法、装置以及电子设备 （阿里巴巴集团控股有限公司）

图像为与所述目标真实航空场景图像对应的模目标真实航空场景图像输入到目标生成式对抗航空场景图像的图像特征数据相匹配的目标航空场景图像的图像特征数据相匹配的目标航空2获得目标真实航空场景图像，并获得待处理航空场景模拟模拟图像为与所述目标真实航空场景图像对将所述待处理航空场景模拟图像和所述目标真实航空场景图像输入到目标生成式对所述将所述待处理航空场景模拟图像和所述目标真实航空场景图像输入到目标生成将所述待处理航空场景模拟图像和所述目标真实航空场景图像输入到目标生成式对将所述目标真实航空场景图像的高维图像特征数据迁入到所述待处理航空场景模拟所述将所述目标真实航空场景图像的高维图像特征数据迁入到所述待处理航空场景获得所述待处理航空场景模拟图像的初始高维根据所述目标真实航空场景图像的高维图像特征数据，调整所所述根据所述目标真实航空场景图像的高维图像特征数据，调整根据所述目标真实航空场景图像的高维图像特征数据，调整所将所述候选航空场景模拟图像的高维图像特征数据与所述待处理航空场景模拟图像数据与所述待处理航空场景模拟图像的初始高维图像特征数若所述相似度达到或者超出相似度阈值，则将所述候选像特征数据与所述目标真实航空场景图像的图像特征数据相匹配的目标航空场景模拟图根据所述样本航空场景模拟图像和所述样本真实航空场景图像将第一样本航空场景模拟图像和第一样本真实航空场景图像输入到所述待训练生成3将所述第一样本真实航空场景图像的图像特征数据迁移到所述第一样本航空场景模判断所述第一目标航空场景模拟图像的图像特征数据是否与所述第一样本真实航空若所述第一目标航空场景模拟图像的图像特征数据不与所述第一样本真实航空场景将所述第二样本真实航空场景图像的图像特征数据迁移到所述第二样本航空场景模判断所述第二目标航空场景模拟图像的图像特征数据是否与所述第二样本真实航空若所述第二目标航空场景模拟图像的图像特征数据与所述第二样本真实航空场景图目标航空场景模拟图像的图像特征数据不与所述第二样本真实航空场景图像的图像特征若所述相似度未达到所述相似度阈值，则继续调整所述待处理根据所述目标真实航空场景图像和所述目标对象，构建所述目标真对所述待处理航空场景模拟图像对应的三维场景模型进行成像模拟，实航空场景图像和所述目标对象，构建所述目标真实航空场景图像对应的三维场景模型，根据所述目标真实航空场景图像，通过指定图像采集设备获得所述4根据所述指定图像采集设备的参数数据建立目标三维空间根据所述目标二维图像的图像特征数据，确定所述目标对象在所述根据所述指定图像采集设备的参数数据和所述目标三维空间坐标根据所述指定图像采集设备的参数数据和所述目标三维空间坐针对所述稀疏点云数据进行点云扩展，获得所述三维场景模型航空场景模拟图像对应的三维场景模型进行成像模拟，获得所述待处理航空场景模拟图获得所述目标航空场景模拟图像中的目标对象与所述对象的述待处理航空场景模拟图像为与所述目标真实航空场景图像对将所述待处理航空场景模拟图像和所述目标真实航空场景图像输入到目标生成式对将所述目标真实航空场景图像的高维图像特征数据迁入到所述待处理航空场景模拟所述将所述目标真实航空场景图像的高维图像特征数据迁入到所述待处理航空场景5获得所述待处理航空场景模拟图像的初始高维根据所述目标真实航空场景图像的高维图像特征数据，调整所所述根据所述目标真实航空场景图像的高维图像特征数据，调整根据所述目标真实航空场景图像的高维图像特征数据，调整所将所述候选航空场景模拟图像的高维图像特征数据与所述待处理航空场景模拟图像数据与所述待处理航空场景模拟图像的初始高维图像特征数若所述相似度达到或者超出相似度阈值，则将所述候选存储器，用于存储航空场景图像的处理方法的程序，该设备通获得目标真实航空场景图像，并获得待处理航空场景模拟模拟图像为与所述目标真实航空场景图像对根据所述待处理航空场景模拟图像和所述目标真实航空场景根据所述对象的标注数据，获得所述目标航空场景模拟图像中的目标对象的标注数所述根据所述待处理航空场景模拟图像和所述目标真实航空场景图像将所述待处理航空场景模拟图像和所述目标真实航空场景图像输入到目标生成式对所述将所述待处理航空场景模拟图像和所述目标真实航空场景图像输入到目标生成将所述待处理航空场景模拟图像和所述目标真实航空场景图像输入到目标生成式对将所述目标真实航空场景图像的高维图像特征数据迁入到所述待处理航空场景模拟6所述将所述目标真实航空场景图像的高维图像特征数据迁入到所述待处理航空场景获得所述待处理航空场景模拟图像的初始高维根据所述目标真实航空场景图像的高维图像特征数据，调整所所述根据所述目标真实航空场景图像的高维图像特征数据，调整根据所述目标真实航空场景图像的高维图像特征数据，调整所将所述候选航空场景模拟图像的高维图像特征数据与所述待处理航空场景模拟图像数据与所述待处理航空场景模拟图像的初始高维图像特征数若所述相似度达到或者超出相似度阈值，则将所述候选所述待处理航空场景模拟图像和所述目标真实航空场景图像输入到目标生成式对抗网络图像特征数据与所述目标真实航空场景图像的图像特征数据相匹配的目标航空场景模拟根据所述样本航空场景模拟图像和所述样本真实航空场景图像将第一样本航空场景模拟图像和第一样本真实航空场景图像输入到所述待训练生成将所述第一样本真实航空场景图像的图像特征数据迁移到所述第一样本航空场景模7判断所述第一目标航空场景模拟图像的图像特征数据是否与所述第一样本真实航空若所述第一目标航空场景模拟图像的图像特征数据不与所述第一样本真实航空场景将所述第二样本真实航空场景图像的图像特征数据迁移到所述第二样本航空场景模判断所述第二目标航空场景模拟图像的图像特征数据是否与所述第二样本真实航空若所述第二目标航空场景模拟图像的图像特征数据与所述第二样本真实航空场景图二目标航空场景模拟图像的图像特征数据不与所述第二样本真实航空场景图像的图像特根据所述目标真实航空场景图像和所述目标对象，构建所述目标真对所述待处理航空场景模拟图像对应的三维场景模型进行成像模拟，所述获得所述待处理航空场景模拟图像中的对象的标注数据，包括：述待处理航空场景模拟图像为与所述目标真实航空场景图像对标注数据获得单元，用于根据所述对象的标注数据，获得所述目8将所述待处理航空场景模拟图像和所述目标真实航空场景图像输入到目标生成式对所述将所述待处理航空场景模拟图像和所述目标真实航空场景图像输入到目标生成将所述待处理航空场景模拟图像和所述目标真实航空场景图像输入到目标生成式对将所述目标真实航空场景图像的高维图像特征数据迁入到所述待处理航空场景模拟所述将所述目标真实航空场景图像的高维图像特征数据迁入到所述待处理航空场景获得所述待处理航空场景模拟图像的初始高维根据所述目标真实航空场景图像的高维图像特征数据，调整所所述根据所述目标真实航空场景图像的高维图像特征数据，调整根据所述目标真实航空场景图像的高维图像特征数据，调整所将所述候选航空场景模拟图像的高维图像特征数据与所述待处理航空场景模拟图像数据与所述待处理航空场景模拟图像的初始高维图像特征数若所述相似度达到或者超出相似度阈值，则将所述候选存储器，用于存储航空场景图像的处理方法的程序，该设备通获得目标真实图像，并获得待处理模拟图像，所述待处理模拟将所述待处理模拟图像和所述目标真实图像输入到目标生成式对所述将所述待处理模拟图像和所述目标真实图像输入到目标生成式对抗网络模型中，将所述待处理模拟图像和所述目标真实图像输入到目标生成式对抗网9将所述目标真实图像的高维图像特征数据迁入到所述待处所述将所述目标真实图像的高维图像特征数据迁入到所述待处理模拟根据所述目标真实图像的高维图像特征数据，调整所述待处理模拟所述根据所述目标真实图像的高维图像特征数据，调整所述待处理模拟根据所述目标真实图像的高维图像特征数据，调整所述待处理模拟将所述候选模拟图像的高维图像特征数据与所述待处理模拟图像的初始高维图像特若所述相似度达到或者超出相似度阈值，则将所述候选模拟图获得目标真实图像，并获得待处理模拟图像，所述待处理模拟将所述待处理模拟图像和所述目标真实图像输入到目标生成式对所述将所述待处理模拟图像和所述目标真实图像输入到目标生成式对抗网络模型中，将所述待处理模拟图像和所述目标真实图像输入到目标生成式对将所述目标真实图像的高维图像特征数据迁入到所述待处所述将所述目标真实图像的高维图像特征数据迁入到所述待处理模拟根据所述目标真实图像的高维图像特征数据，调整所述待处理模拟所述根据所述目标真实图像的高维图像特征数据，调整所述待处理模拟根据所述目标真实图像的高维图像特征数据，调整所述待处理模拟将所述候选模拟图像的高维图像特征数据与所述待处理模拟图像的初始高维图像特若所述相似度达到或者超出相似度阈值，则将所述候选模拟图[0007]将所述待处理航空场景模拟图像和所述目标真实航空场景图像输入到目标生成[0012]将第一样本航空场景模拟图像和第一样本真实航空场景图像输入到所述待训练[0013]将所述第一样本真实航空场景图像的图像特征数据迁移到所述第一样本航空场[0014]判断所述第一目标航空场景模拟图像的图像特征数据是否与所述第一样本真实[0017]若所述第一目标航空场景模拟图像的图像特征数据不与所述第一样本真实航空[0018]将所述第二样本真实航空场景图像的图像特征数据迁移到所述第二样本航空场[0019]判断所述第二目标航空场景模拟图像的图像特征数据是否与所述第二样本真实[0020]若所述第二目标航空场景模拟图像的图像特征数据与所述第二样本真实航空场[0023]将所述待处理航空场景模拟图像和所述目标真实航空场景图像输入到目标生成[0024]将所述目标真实航空场景图像的高维图像特征数据迁入到所述待处理航空场景[0030]将所述候选航空场景模拟图像的高维图像特征数据与所述待处理航空场景模拟特征数据与所述待处理航空场景模拟图像的初始高维图像特[0045]可选的，所述根据所述指定图像采集设备的参数数据和所述目标三维空间坐标维场景模型在所述目标三维空间坐标系中对应的稀[0049]可选的，所述对所述待处理航空场景模拟图像对应的三维场景模型进行成像模[0063]将所述待处理航空场景模拟图像和所述目标真实航空场景图像输入到目标生成[0066]将所述待处理航空场景模拟图像和所述目标真实航空场景图像输入到目标生成[0076]可选的，所述根据所述待处理航空场景模拟图像和所述[0081]将第一样本航空场景模拟图像和第一样本真实航空场景图像输入到所述待训练[0082]将所述第一样本真实航空场景图像的图像特征数据迁移到所述第一样本航空场[0083]判断所述第一目标航空场景模拟图像的图像特征数据是否与所述第一样本真实[0086]若所述第一目标航空场景模拟图像的图像特征数据不与所述第一样本真实航空[0087]将所述第二样本真实航空场景图像的图像特征数据迁移到所述第二样本航空场[0088]判断所述第二目标航空场景模拟图像的图像特征数据是否与所述第二样本真实[0089]若所述第二目标航空场景模拟图像的图像特征数据与所述第二样本真实航空场[0092]将所述待处理航空场景模拟图像和所述目标真实航空场景图像输入到目标生成[0093]将所述目标真实航空场景图像的高维图像特征数据迁入到所述待处理航空场景[0099]将所述候选航空场景模拟图像的高维图像特征数据与所述待处理航空场景模拟特征数据与所述待处理航空场景模拟图像的初始高维图像特[0108]标注数据获得单元，用于获得所述待处理航空场景模拟图像中的对象的标注数[0125]将所述待处理模拟图像和所述目标真实图像输入到目标获得图像特征数据与所述目标真实图像的图像特征数据相待处理航空场景模拟图像和目标真实航空场景图像输入到已经训练好的目标生成式对抗[0137]图4其为本申请第一实施例中提供的一种目标航空场景模拟图像的生成方法的流[0144]本申请提供的航空场景图像的处理方法一般应用于生成具有携带有标注数据的法的应用场景的第一示意图。本申请提供的航空场景图像的处理方法的应用场景实施例标注数据的图像来辅助人或者计算机设备理解，如在训练用于图像处理的相关网络模型象在该航空场景图像中的位置数据一般对应于目标对象在航空场景图像中[0146]本申请提供的航空场景图像的处理方法由能够提供计算或者应用服务的电子设得与目标真实机坪场景图像对应的待处理机处理机坪场景模拟图像对应的三维场景模型进行成像模拟，获得待处理机坪场景模拟图对应的三维场景模型，并进一步根据指定图像采集设备的参数数据和预设的光照参数数数据与目标真实机坪场景图像的图像特征数据相匹配的目标机坪真实机坪场景图像的图像特征数据相匹配是通过待训练生成式对抗网络模型中的判别器据；将第二样本真实机坪场景图像的图像特征数据迁移到第二样本机坪场景模拟图像中，[0162]在将待处理机坪场景模拟图像和目标真实机坪场景图像输入到目标生成式对抗模拟图像的高维图像特征数据与待处理机坪场景模拟图像的初始高维图像特征数据进行[0166]请再参照图1，在获得目标机坪场景模拟图像后和待处理机坪场景模拟图像中的场景模拟图像中的目标对象的自动数据标注，简化了对机坪场景图像进行数据标注的流[0168]需要说明的是，本申请提供的上述航空场景图像的处理用于其它应用场景，本申请提供的航空场景图像的处理方法对执行主体也不做具体限定，处理航空场景模拟图像为与目标真实航空场景图像对[0172]所谓待处理航空场景模拟图像为与目标真实航空场景图像对应的模拟图像，包[0181]本申请第一实施例中，目标生成式对抗网络模型为通过模型训练预先获得的模航空场景图像的图像特征数据相匹配是通过待训练生成式对抗网络模型中的判别器来实像输入到待训练生成式对抗网络模型中，获得第二样本真实航空场景图像的图像特征数据；将第二样本真实航空场景图像的图像特征数据迁移到第二样本航空场景模拟图像中，的判断，本申请第一实施例中对不同图像之间的图像特征的相似度的判断的原理是一致[0188]在将待处理航空场景模拟图像和目标真实航空场景图像输入到目标生成式对抗空场景模拟图像的过程请参照图4，其为本申请第一实施例中提供的一种目标航空场景模图像输入到目标生成式对抗网络模型中，获得目标真实航空场景图像的高维图像特征数数据；再将目标真实航空场景图像的高维图像特征数据迁入到待处理航空场景模拟图像模拟图像的高维图像特征数据与待处理航空场景模拟图像的初始高维图像特征数据进行一步获得图像特征数据与目标真实航空场景图像的图像特征数据相匹配的目标航空场景图像中的目标对象在该航空场景图像中的位置数据一般对应于目标对象在航空场景图像[0195]与本申请提供的航空场景图像的处理方法的应用场景实施例以及第一实施例提[0196]请参照图5，其为本申请第二实施例中提供的一种航空场景图像的处理装置的示[0199]图像处理单元502，用于将所述待处理航空场景模拟图像和所述目标真实航空场[0202]将第一样本航空场景模拟图像和第一样本真实航空场景图像输入到所述待训练[0203]将所述第一样本真实航空场景图像的图像特征数据迁移到所述第一样本航空场[0204]判断所述第一目标航空场景模拟图像的图像特征数据是否与所述第一样本真实[0207]若所述第一目标航空场景模拟图像的图像特征数据不与所述第一样本真实航空[0208]将所述第二样本真实航空场景图像的图像特征数据迁移到所述第二样本航空场[0209]判断所述第二目标航空场景模拟图像的图像特征数据是否与所述第二样本真实[0210]若所述第二目标航空场景模拟图像的图像特征数据与所述第二样本真实航空场[0212]可选的所述图像处理单元502，具体用于将所述待处理航空场景模拟图像和所述[0218]将所述候选航空场景模拟图像的高维图像特征数据与所述待处理航空场景模拟特征数据与所述待处理航空场景模拟图像的初始高维图像特[0230]可选的，所述根据所述指定图像采集设备的参数数据和所述目标三维空间坐标维场景模型在所述目标三维空间坐标系中对应的稀[0234]可选的，所述对所述待处理航空场景模拟图像对应的三维场景模型进行成像模[0242]与本申请提供的航空场景图像的处理方法得应用场景实施例以及第一实施例提[0248]将所述待处理航空场景模拟图像和所述目标真实航空场景图像输入到目标生成申请提供的航空场景图像的处理方法得应用场景实施例以及第一实施例提供的航空场景[0251]与本申请提供的航空场景图像的处理方法得应用场景实施例以及第一实施例提[0253]将所述待处理航空场景模拟图像和所述目标真实航空场景图像输入到目标生成请提供的航空场景图像的处理方法得应用场景实施例以及第一实施例提供的航空场景图[0256]与本申请提供的航空场景图像的处理方法的场景实施例以及第一实施例中提供[0257]请参照图7，其为本申请第五实施例中提供的一种航空场景图像的处理方法的流航空场景模拟图像为与目标真实航空场景图像[0259]所谓待处理航空场景模拟图像为与目标真实航空场景图像对应的模拟图像，包根据目标真实航空场景图像和目标对象，构建目标真实航空场景图像对应的三维场景模[0265]本申请第五实施例中，根据待处理航空场景模拟图像和[0266]本申请第五实施例中，目标生成式对抗网络模型为通过模型训练预先获得的模航空场景图像的图像特征数据相匹配是通过待训练生成式对抗网络模型中的判别器来实像输入到待训练生成式对抗网络模型中，获得第二样本真实航空场景图像的图像特征数据；将第二样本真实航空场景图像的图像特征数据迁移到第二样本航空场景模拟图像中，的判断，本申请第五实施例中对不同图像之间的图像特征的相似度的判断的原理是一致[0273]在将待处理航空场景模拟图像和目标真实航空场景图像输入到目标生成式对抗模拟图像的高维图像特征数据与待处理航空场景模拟图像的初始高维图像特征数据进行[0277]在获得目标航空场景模拟图像后和待处理航空场景模拟图像中的对象的标注数[0280]与本申请提供的航空场景图像的处理方法的应用场景实施例以及第五实施例提[0281]请参照图8，其为本申请第六实施例中提供的一种航空场景图像的处理装置的示[0284]标注数据获得单元802，用于获得所述待处理航空场景模拟图像中的对象的标注[0285]目标图像获得单元803，用于根据所述待处理航空场景模拟图像和所述目标真实目标真实航空场景图像输入到目标生成式对抗网络模型中，获得所述标航空场景模拟图[0294]将第一样本航空场景模拟图像和第一样本真实航空场景图像输入到所述待训练[0295]将所述第一样本真实航空场景图像的图像特征数据迁移到所述第一样本航空场[0296]判断所述第一目标航空场景模拟图像的图像特征数据是否与所述第一样本真实[0299]若所述第一目标航空场景模拟图像的图像特征数据不与所述第一样本真实航空[0300]将所述第二样本真实航空场景图像的图像特征数据迁移到所述第二样本航空场[0301]判断所述第二目标航空场景模拟图像的图像特征数据是否与所述第二样本真实[0302]若所述第二目标航空场景模拟图像的图像特征数据与所述第二样本真实航空场[0305]将所述待处理航空场景模拟图像和所述目标真实航空场景图像输入到目标生成[0306]将所述目标真实航空场景图像的高维图像特征数据迁入到所述待处理航空场景