GB-T《农产品市场信息采集与数据质量控制规范》

GB/T××××—××××GB/T××××—××××PAGE目录前言 错误！未定义书签。1范围 22规范性引用文件 23术语和定义 24信息采集的内容 54.1必选项 54.2可选项 65信息采集方法 75.1采集点的确定 75.2信息采集方式 76数字化表达方法 76.1信息编码方法 76.2代码结构 87质量控制的内容和方法 97.1格式检查 97.2值域范围检查 97.3一致性检查 97.4质量控制方法 107.5质量控制标识 10农产品市场信息采集与质量控制规范1范围本标准规定了农产品市场信息的采集内容、采集方法、表达方法和信息质量控制等要求。本标准适用于以农产品市场信息监测、分析、预警、发布等为目的的农产品市场信息采集。2规范性引用文件下列文件对于本文件的应用是必不可少的。凡是注日期的引用文件，仅注日期的版本适用于本文件。凡是不注日期的引用文件，其最新版本（包括修订版）适用于本文件。GB/T2260中华人民共和国行政区划代码GB/T10114县级以下行政区划代码编制规则GB/T18521-2001地名分类与类别代码编制规则GB/T2659-2000世界各国和地区名称代码GB/T17710-1999数据处理校验码系统GB/T3358.2统计学术语第二部分统计质量控制术语NY/T2137农产品市场信息分类与计算机编码3术语和定义下列术语和定义适用于本标准。3.1农产品产地producingareaofagriculturalproducts农产品（包括植物、动物、微生物及其产品）生长或生产的相关区域。3.2必选项requiredoptions信息采集中必不可少的内容，是农产品市场信息的核心。3.3可选项selectiveoptions在信息采集中，可根据用户需求和实际情况进行取舍的部分，是农产品市场信息的必要补充。3.4校验码checkercharacter可通过数学关系来验证代码正确性的附加字符。3.5农产品市场信息agri-productmarket-information从农产品流通环节采集的包括产品名称、交易地点、交易时间、产品价格、产品等级等信息的数据及编码集合。3.6质量控制qualitycontrol使采集的数据的质量达到规定要求所采取的操作技术和活动。3.7格式检查formatcheck对数据是否符合规定格式以及数据完整性的检查。3.8值域检查numericalrangecheck对数据是否在其值域范围内的检查。3.9一致性检查consistencycheck对在同一或邻近的时间、空间范围内的变化是否符合特定规律的检查。3.10订正数据correctiondata当原始采集数据疑误时，通过统计方法计算或估算，可以用以代替原疑误数据的数据。3.11质量控制标识qualitycontrolflag标识数据质量的数字或代码。4信息采集的内容农产品全息市场信息采集的内容（表1）包括以下11项，按照信息内容在市场信息中的重要性，又分为必选项和可选项。必选项是信息采集中必须采集的科目，可选项可根据实际情况决定是否采集。表1农产品市场信息内容简表序号信息内容要素类型简要说明1交易时间必选农产品市场交易发生的时间2交易地点必选农产品市场交易所在的地点或所在的市场3产品名称必选交易的农产品品种名称4认证类型必选产品的认证类型5产品等级必选产品的质量等级规格6产品产地可选产品的产地或来源地7上市日期可选产品从生产环节进入流通环节的日期8产品价格必选产品交易的价格，单位为元/计量单位9交易量必选产品交易量10供应量可选产品供应量11计量单位必选产品的计量单位4.1必选项4.1.1交易时间交易时间是指市场交易发生的时间。一般也是信息采集的时间，表达的格式为YYYY-MM-DD-HH-MM。交易时间精度据信息内容而定：针对某一时刻的特定交易，其交易时间应精确到分；针对一段时期内交易，交易时间根据时间段的长短可以精确到小时或日。4.1.2交易地点交易地点是指农产品市场交易发生的地点。一般来说交易地点就是交易市场，类型有田头市场、收购市场、批发市场、零售市场和期货市场等。交易地点应该包括交易市场所在的地区和交易市场的名称。4.1.3产品名称产品名称包括农产品的种类和品种名称。一般要求产品名称至少精确到品种，建议根据产品分类目录进一步细分，产品的分类和名称见NY/T2137。4.1.4产品安全认证级别产品质量安全认证级别包括普通农产品、无公害农产品、绿色农产品、有机农产品等。4.1.5产品等级规格产品的等级规格是综合农产品外观、质地等质量相关要素，按照分级标准对产品的综合评级，分为一级、二级和三级，分级依据为各产品等级规格标准中的感官分级部分。4.1.6产品价格产品价格是指市场成交价格，是得到了买卖双方的认可和接受的“实际交易价格”，也是商品交易的最终执行价格。价格单位以元/千克表示。4.1.7交易量交易量和成交量意义相同，指单次或一个时间段内以同一价格完成交易的同一规格产品的数量。交易量的单位以千克表示。4.1.8计量单位计量单位为开放的可选择式计量单位，按照农产品的市场形态和出售方式，分为重量单位和数量单位。其中重量计量单位为克、500克（斤）、千克、吨等，数量计量单位为个、头、条、只、支、箱等。4.2可选项4.2.1产品产地农产品产地以行政区划表示，原则上必须精确到县级，推荐细化到乡村一级。考虑到部分产品产地难以明确，此部分项目可表示为产品的上级来源地，但表示方式为上一级市场的名称。4.2.2上市日期产品上市日期是指产品收获或初步加工后从生产环节进入市场环节的日期，一般要求时间精确到天，表达的格式为YYYY-MM-DD。4.2.3供应量供应量是在当前或未来一个时间点或时间段内，产品提供方在当前价格水平下或某一价格水平下，有能力并且愿意提供的产品的数量。供应量既可以是销售单位的供应量，也可以是生产单位的预计产量，其单位以千克表示。5信息采集方法5.1采集点的确定农产品市场信息的采集应采用定点抽样的实地调查，以提高信息的准确性和时效性。在全部农产品中选取一部分具有代表性的地区、市场、品种，定期开展信息采集。选择在当地有较大影响力的市场作为信息采集基点，按照不同品种市场占有量的大小抽选有代表性的商户作为调查点。调查点和采集基点可根据市场交易量变化情况进行样本轮换和适度调整。5.2信息采集方式信息采集方式采用现场询问买卖双方的方式进行，采集的信息只包括处于正常市场状态下的市场交易形式。除特殊情况外，不采集一些短期促销和甩卖形式、不能代表正常市场交易状态的交易信息。信息采集时间为交易量最大的时间点或时间段。一般数据采集后12小时内需上报汇总，以保证信息的时效性，超过时限的数据视为过期无效数据。6数字化表达方法6.1信息编码方法为方便农产品市场信息的数字化传输和智能化处理，应对采集的市场信息进行编码表示。按照农产品市场信息内容的不同，以及在信息采集中的信息获取的先后顺序，农产品市场信息编码由13层75位代码组成。其中第1-13层代码分别为交易时间、交易地点、产品名称、认证类型、产品等级、产品产地、上市日期、产品价格、交易量、供应量、计量单位、校验码和质量控制标识，其代码顺序、代码格式和编码方法如表2所示。表2农产品全息市场信息编码表标识符要素格式说明1交易时间N12YYYYMMDDHHMM，具体到分2交易地点N6+N46位县区代码（参照GB/T2260）+1位市场类型+3位所在市场代码（由行业部门规定）3产品名称N13参照NY/T21374认证类型N1产品的认证类型（1-普通、2-无公害、3-绿色、4-有机）5产品等级N1产品的质量等级（1-一级、2-二级、3-三级）6产品产地N6+N46位县区代码（参照GB/T2260）+4位乡村代码（参照GB/T10114），表示来源地时后四位为9+（3位市场代码），产地为企业时后四位为8+（3位企业代码）；进口产品编码为999+3位国家代码（参照GB/T2659）+4位地区、市场或企业代码；7上市日期N8YYYYMMDD，具体到日8产品价格N4+N1单位：元/计量单位；采用科学计数法，前4位为有效数字（含小数点后2位），后1位为以10为底的指数9交易量N4+N1采用科学计数法，前4位为有效数字（全部为小数点后4位），后1位为以10为底的指数。10供应量N4+N1采用科学计数法，前4位为有效数字（全部为小数点后4位），后1位为以10为底的指数。11计量单位N2克（01）、斤（02）、千克（03）、吨（04），数量计量单位为个（21）、头（22）、条（23）、只（24）、支（25）、箱（26）12校验码N2计算方法参照GB/T1771013质量控制标识N1未做质量控制（0）、正确（1）、错误（2）、可疑（3）、技术订正（6）、核实修正（7）6.2代码结构农产品市场信息编码代码结构如图1所示。图1农产品市场信息编码代码结构7质量控制的内容和方法农产品市场信息质量控制的一般顺序为：格式检查、值域检查、一致性检查，最后为数据质量标识。7.1格式检查对采集的数据的结构及每条数据的完整性进行检查，包括数据来源是否合法、必选项是否完整、校验码验证是否正确等。7.2值域范围检查对采集的数据的取值范围进行合理性检查，超过值域范围的数据为错误数据。按照农产品市场信息采集规范和编码规则，相关要素值域范围如下：上报前12小时内≤采集时间≤数据上报时间；产品等级∈（1,2,3）；即产品等级为规定的（1-普通、2-无公害、3-绿色、4-有机）其中的一种。认证类型∈（1,2,3,4）；即认证类型为（1-普通、2-无公害、3-绿色、4-有机）其中的一种。00010≤产品价格≤99999；即产品价格处于0.01元-99.99*109元之间。00010≤交易量≤99999；即产品交易量处于0.0001-0.9999*109千克之间。00010≤供应量≤99999；即产品交易量处于0.0001-0.9999*109千克之间。计量单位∈（01,02,03,04,21,22,23,24,25,26）即产品计量单位为克（01）、斤（02）、千克（03）、吨（04），数量计量单位为个（21）、头（22）、条（23）、只（24）、支（25）、箱（26）中的一种。7.3一致性检查一致性检查包括空间、时间和逻辑关系的一致性检查，具体如下：采集地点的编码与行政区划编码符合；产品名称与编码与农产品市场信息分类与计算机编码符合；除附有特殊说明外，同一采集点同一产品价格数据相邻两天变化幅度不超过20%；除附有特殊说明外，相邻两个同类采集点同一产品同期价格差幅不超过20%；7.4质量控制方法质量控制方法主要包括：技术控制：根据格式要求和值域范围，从信息采集设备、数据库入库要求等环节自动对数据进行质量控制，筛选可疑数据，剔除明显错误数据。逻辑评估：将主要数据与关联指标计算评估逻辑关系，对格式要求和值域检查合格的数据进行质量控制，筛选、订正可疑数据。如按照农产品市场流通顺序，下一环节价格一般不低于上一环节，产地市场低于批发市场低于零售市场。反馈核实：将技术控制和逻辑评估环节筛选出来的可疑数据情况及时反馈给信息采集员，采集员核实后再次上报，并对数据可疑情况进行说明。反馈核实数据用于修正可疑数据。7.5质量控制标识对进行质量控制后的数据进行质量标识。标识数