CN113553455B 数据的处理方法、装置、存储介质和处理器 （阿里巴巴集团控股有限公司）

2基于所述第一索引将所述待写入数据写入对将所述第一索引转换为第二索引，其中，所述第二索引用于支持数异构的计算资源基于所述查询请求，并行使用所述线性索引基于所述第一索引将所述特征向量存储至关3接收到新增的多张图像数据，其中，所述多张图像数据为由设基于所述第一索引将所述新增的多张图像数据和关联信息写入对将所述第一索引转换为第二索引，其中，所述第二索引用于支持检接收待写入数据，其中，所述待写入数据为基于数据检索系统所基于所述第一索引将所述待写入数据写入对将所述第一索引转换为第二索引，其中，所述第二索引用于支持数接收到新增的多张图像数据，其中，所述多张图像数据为基于所述第二接收模块，用于接收图像数据，并抽取所述图像数4第三获取模块，用于获取第一索引，所述第一索引用于第三写模块，用于基于所述第一索引将所述新增的多张图像基于所述第一索引将所述待写入数据写入对将所述第一索引转换为第二索引，其中，所述第二索引用于支持数56第二索引实现海量数据的检索，从而达到了对增量数据的实时写入以及实时检索的目的，实现了提高数据检索的效率的技术效果，进而解决了对数据进行处理的效率低的技术问[0016]图1示出了一种用于实现数据的处理方法的计算机终端(或移动设备)的硬件结构7员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范算装置中执行。图1示出了一种用于实现数据的处理方法的计算机终端(或移动设备)的硬件结构框图。如图1所示，计算机终端10(或移动设备10)可以包括一个或多个(图中采用8[0037]应当注意到的是上述一个或多个处理器102和/或其他数据处理电路在本文中通算机终端10(或移动设备)中的其他元件中的任意一个内。如本申请实施例中所涉及到的，[0038]存储器104可用于存储应用软件的软件程序以及模块，如本发明实施例中的数据处理方法对应的程序指令/数据存储装置，处理器102通过运行存储在存储器104内的软件[0039]传输装置106用于经由一个网络接收或者发送数据。上述的网络具体实例可包括[0040]显示器可以例如触摸屏式的液晶显示器(LCD)，该液晶显示器可使得用户能够与备)可以包括硬件元件(包括电路)、软件元件(包括存储在计算机可读介质上的计算机代9取第一索引，可以是使用索引(index)服务生成第一[0050]在本发明上述步骤S206提供的技术方案中，在使用索引法，量化索引的索引结果使得数据处理的效率更高，比如，使用乘积量化(Product后台服务，可以定时构建量化索引。可选地，immutable量化索引可以由后台线程自动从[0057]作为一种可选的实施方式，创建服务使用索引算法将线[0079]在本发明上述步骤S306提供的技术方案中，在使用索引到与图像查询请求匹配的图像，从而达到了对增量数据的实时写入以及实时检索的目的，实现了提高数据检索的效率的技术效果，进而解决了对数据进行处理的效率低的技术问[0087]在本发明上述步骤S402提供的技术方案中，接收到的多张图像数据也即新增数[0089]在本发明上述步骤S404提供的技术方案中，在接收到新[0091]步骤S406，基于第一索引将新增的多张图像数据和关联信息写入对应的存储位据和关联信息通过Append方法写入CPU或GPU中对应数据结构的消息队列中，提供线性索引转换为量化索引，该量化索引用于支持数据量超过目标阈值的数据的检索，可以为该实施例将索引分为第一索引和第二索引，通过第一索引实现新增的多张图像数据的写待写入数据为基于数据检索系统所关联的至少一个数据采集器采集得到的；获取第一索和关联信息通过Append方法写入CPU或GPU中对应数据结构的消息队列中，提供线性索引。据映射为与其具有对应关系的输出数据的统一数据处理模型，从而实现数据的自动化处[0117]该实施例的索引服务将新增数据通过Append的方式写入中央处理器(CPU)或图形[0119]在该实施例中，利用检索服务可以检索出两部分数据，包括immutable量化索引该线性队列为小批量并灵活使用CPU/GPU的计算资源，从而对外提供高性能的线性检索能[0121]图6是根据本发明实施例的一种数据交互方法的交互界面以及支持历史海量数据检索的immutable量化索引，并通过采用不同的索引算法和异构的[0126]根据本发明实施例，还提供了一种用于实施上述图2所示的数据处理方法的数据转换模块74分别对应于实施例1中的步骤S202至步骤S208，四个模块与对应的步骤所实现为装置的一部分可以运行在实施例一提供的计算机终[0133]根据本发明另一实施例，还提供了一种用于实施上述图3所示的数据处理方法的二转换模块84分别对应于实施例1中的步骤S302至步骤S308，四个模块与对应的步骤所实作为装置的一部分可以运行在实施例一提供的计算机终[0140]根据本发明另一实施例，还提供了一种用于实施上述图4所示的数据处理方法的三转换模块94分别对应于实施例1中的步骤S402至步骤S408，四个模块与对应的步骤所实作为装置的一部分可以运行在实施例一提供的计算机终了对增量数据的实时写入以及实时检索的目的，实现了提高数据检索的效率的技术效果，索引将新增的多张图像数据和关联信息写入对应的存储位置；将第一索引转换为第二索了对增量数据的实时写入以及实时检索的目的，实现了提高数据检索的效率的技术效果，能手机(如Android手机、iOS手机等)、平板电脑[0170]本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可[0193]所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用或者说对现有技术做出贡献的部分或者该技术