DB13T 6190-2025 农业农村大数据采集和交换共享规范

13I本文件主要起草人：安军锋、李清华、闫海涛、滕桂法、张军力、曹倩、郭振环、侯岩隆、任丽、张晓俭、王春山、张璠、王忠、李静、杨阳、张1农业农村大数据采集和交换共享规范下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中，注日期的引用3.13.2FTP：文件传输协议（FileTransferProtocol)2Control)PKI：公钥基础设施（PublicKeyInfrastructure)PDA：数据采集器（PersonalDigitalAssistant)5.3.1基本要求），5.3.2采集方法人工采集系统对接通过ETL平台从不同结构的数据源中抽取（Extract）数据，对数据进行复杂的加工处理），5.3.3采集参数要求），35.3.4更新周期a)时效性极强的数据，如天气、温度、湿度等实时更新；5.4质量控制5.4.1基本原则5.4.2控制方式数据清洗a)数据分析，应对数据源进行分析，及时发现数据源存在的质量问题；b)定义清洗规则，应给出空值、非法值、不一致数据、相似重复记录等的检测和处理规定；c)执行数据清洗规则，依据定义的清洗规则，补足残缺和空值，纠正不一致数据，完成数据d)清洗结果验证，对定义的清洗方法正确性和效率进行验证与评估，对不满足清洗要求的清洗方法进行调整和优化。数据清洗过程宜多次迭代并进行分析、设计和验数据转换数据分析数据质量评价方法进行人工检测。一般可分为全数检测和抽样检测，针对国家强制要求、特殊要求、其他可能导致严重影响的数据质量项目进行全数检测，针对质量比较稳定、数据量较大、检查费5.5.1安全要求45.5.2安全控制方法数据采集过程中应采用全方位防御措施，避免网络攻击6.1.1信息资源分类6.1.2编码方法5c)一级分类代码：采用序列顺序码用2位阿拉伯数字表示，从“10”开始整十递增编码6.1.3农业信息资源编码类目代码6.1.4信息资源目录管理目录使用者注册动目录使用者注册动活及构查询架理管系目录中心维护体录目源发布资息信编目目录提供者规划a)规划：信息资源目录中心梳理、规划本级信息资源目录，制定本部门政务信息资源目录体6b)编目：目录提供者依据本标准中“农业信息资源类目代码”，结合本部门实际，对信息资源进行编辑与整理，形成信息资源目录。目录提供者依法对信息资源目录和目录内容设置c)注册：目录提供者向信息资源目录中心注册信息资源目录内容，并负责定期更新；信息资d)发布：目录中心向目录使用者发布在本中心注册的可公开信息资源目录，向部门发布授权e)查询：目录中心提供信息资源目录查f)维护：目录中心负责保存、备份、恢复与注销信息资源目录内容。6.2元数据管理6.2.1元数据编码对元数据进行编码是为了对每个元数据进行区别和标识，便于元数据的维护与管理。元数据编码又称内部标识符，每个元数据有且只有一个永久标识符。每个元数据均对应一个18b)“数据资源目录一级码”参照信息资源目录的一级分类代码，用2位阿拉伯数字表示，具c)“数据资源目录二级码”参照信息资源目录的二级分类代码，用2位阿拉伯数字表示，具d)“数据资源目录三级码”参照信息资源目录的三级分类代码，用3位阿拉伯数字表示，具e)“数据资源目录四级码”参照信息资源目录的四级分类代码，用3位阿拉伯数字表示，具f)“数据资源目录扩展码”参照信息资源目录的扩展码，用2位阿拉伯数字表示。6.2.2数据元属性应按照统一的标准注册和控制数据元属性，保证数据元在信息交换汇总时保持一致性，并且能76.3命名规则6.3.1数据库命名示例：yzt(项目名称)_my(数据库类型)6.3.2数据表命名普通表命名示例：河北省智慧农机决策管理信息平台的监理站信息表（info_station）命名为：njjcpt_info_station。码表命名码表名称按照basic_表名称进行命名。示例：码表_农业主体类命名为：basic_entities6.4码表规则6.4.1码表来源a)根据对已对接的数据进行分析、归纳结果，将诸如分类代码、行业代码等反应数据类别且b)依据相关法律法规、行业标准提炼出码表数据，形成码表。6.4.2码表列表数据共享前需进行数据基本约定即数据组成、数据脱敏、授权管理三部分工作，数据基本约定共享数据可以以“目录服务、数据共享接口”两种在线方式进行数据共享，也可以以“存储媒体复8数数据质量共享数据农业农村数据共享数据7.2管理要求7.2.1提供者a)负责明确本部门提供的共享数据使用范围和使用权限；d)负责与使用者、管理者协商并确定共享数据、交换模式和更新周期；e)按管理者和使用者的反馈意见修正共享数据中存在的问题。7.2.2管理者c)负责控制共享数据的使用范围和使用权限；f)负责保证数据共享服务环境的安全。7.2.3使用者b)负责与提供者、管理者协商并确定数据共享实体、交换模式、更新周期；c)在授权范围内使用共享数据，未经授权不得将数据提供给第三方；d)在数据使用过程中若发现问题和疑义，应及时向管理者反馈；7.3数据基本约定7.3.1数据组成7.3.2数据脱敏a)应提供敏感数据检查工具，对共享数据进行分析，发现敏感数据；b)应对敏感数据建立数据脱敏安全策略，并按照安全策略进行脱敏；c)应根据数据使用者需求保留敏感数据的原数据格式、属性或关联；d)应对数据脱敏操作过程进行记录，记录内容至少包括操作时间、操作人、操作对象等。7.3.3授权管理9a)应支持针对用户访问权限、数据操作权限、应用访问数据权限等维度的授权管理机制；b)应支持基于数据分级分类的多级授权和操作监管；c)应对权限范围外的数据、应用的尝试操作提出告警；d)应支持资源文件、库表、接口等各共享方式上不同粒度的权限控制；e)资源目录发布应获得授权，明确授权目的和范围，保留授权记录，并遵照授权执行；f)共享数据发布应获得授权，明确授权目的和范围，保留授权记录，并遵照授权执行；g)共享数据申请应获得授权，明确授权目的和范围，保留授权记录，并遵照授权执行；h)应遵循数据共享最小化原则，仅授权对业务必需的数据共享访问；i)应检查有条件共享数据的使用请求符合规定条件；j)应设定授权的有效期并定期检查授权有效性；k)应根据安全策略，生成共享数据访问授权凭证、安全配置信息，并将这些配置信息安全分7,4数据检查要求7.4.1完整性共享数据内容必填字段无缺失，数据覆盖一定的使用范7.4.2准确性7.4.3一致性7.4.4规范性元数据和数据说明应遵循本规范要求，数据目录编制应符合6.1要求，元数据应符合6.2要求。7.4.5时效性7.4.6审核要求初审复审管理者对提交的数据进行复审，如发现问题，应向数据提供者提出修改意见。数据提供者根据7.5.1共享方式数据共享宜采用在线方式，因条件限制不宜在网络上传输的数据，应采用离线7.5.2目录服务目录发现定位服务数据访问数据访问包括访问服务、访问接口两种形式。访问服务应提供数据服务的访问地址、账户、密A.1.1传输协议Header头设置要求：Content-type:applicaA.1.2采集第三方应用接口数据步骤：StringStringStringStringhttp://IP地址/getDataList/String2Stringlistdata.totalSize2http://IP地址/getDataStructure（接口名称）StringStringt_basic_districtStringlist