CN114020472B 一种数据采集方法、装置、设备及存储介质 （上海浦东发展银行股份有限公司）

号池；根据节点信息通过所述主线程领取目标任2根据节点信息通过所述主线程领取目标任务，并将所述目标任务提交到目标工作线若所述签到处理锁的状态信息为未占用状态，则将所述签到处根据所述其他节点的状态信息更新所述签到表，将签到处理锁的相应的，根据节点信息通过所述主线程领取目标任务，并将若所述第二数量小于所述第一数量，则通过主线程领取若所述任务领用锁的状态信息为未占用状态，则将所述任务领通过主线程领取数据库中的任务列表中的目标任务，或者，若所述数据库中的通过主线程将领取的目标任务提交线程池，以使所述线程池若所述其他节点的上次签到时间、所述签到间隔和所述缓冲3根据所述任务信息确定所述目标任务的阶段根据所述目标任务的阶段信息和目标参数进行数若所述目标任务的阶段信息为数据抽取阶段，则根据数据抽取若所述目标任务的阶段信息为数据检查阶段，则根据数据检查若所述目标任务的阶段信息为数据入库阶段，则根据数据入库初始化模块，用于若所述主线程状态信息为开启状采集模块，用于根据节点信息通过所述主线程领取目标任务，并将其中，所述装置还用于获取数据库中的签到间隔；获取数该程序被一个或多个处理器执行时实现如权利要求1-4[0002]随着金融行业数字化的快速发展，商业银行的业务系统[0008]若所述主线程状态信息为开启状态，则通过所述主线程初始化工作线程的线程56[0055]图4是本发明实施例中的一种包含计算机程序的计算机可读存储介质的结构示意7[0060]图1为本发明实施例提供的一种数据采集方法的流程图，本实施例可适用于数据89列表中的目标任务的状态更改为处理中。在获取处于下线状态的节点对应的目标任务之线程尝试获取任务领用锁的状态信息，如果当前有其它处理节点正在领取任务(任务领用锁的状态信息为占用状态)，则当前节点进行锁等待，保证节点处理任务领取的并发一致[0129]图2为本发明实施例提供的一种数据采集装置的结构示意图。本实施例可适用于本发明实施例的功能和使用范围带来任何限制。设备312是典型的轨迹拟合功能的计算设[0138]电子设备312典型地包括多种计算机系统可读介质。这些介质可以是任何能够被[0139]存储装置328可以包括易失性存储器形式的计算机系统可读介质，例如随机存取以及对可移动非易失性光盘(例如只读光盘(CompactDisc-ReadOnlyMemory，CD-ROM)、数字视盘(DigitalVideoDisc-ReadOnlyMemory，DVD-ROM)或者其它光介质)读写的光盘驱动器。在这些情况下，每个驱动器可以通过一个或者多个数据介质接口与总线318相[0144]若所述主线程状态信息为开启状态，则通过所述主线程初始化工作线程的线程[0146]图4为本发明实施例中的一种包含计算机程序的计算机可读存储介质的结构示意被一个或多个处理器执行时实现如本申请所有发明实施例提供的[0148]若所述主线程状态信息为开启状态，则通过所述主线程初始化工作线程的线程[0151]计算机可读的信号介质可以包括在基带中或者作为载波[0153]在一些实施方式中，客户端、服务器可以利用诸如HTTP(HyperTextTransfer[0155]可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机及远程计算机的情形中，远程计算机可以通过任意种类的网络包括局域网(LAN)或广域网[0158]本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、