食品安全大数据技术规范(征求意见稿)_第1页
食品安全大数据技术规范(征求意见稿)_第2页
食品安全大数据技术规范(征求意见稿)_第3页
食品安全大数据技术规范(征求意见稿)_第4页
食品安全大数据技术规范(征求意见稿)_第5页
已阅读5页,还剩10页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

ICS65.020.01

B07T/HSKX

团体标准

T/HSKX00X—20XX

食品安全大数据技术规范

Technicalspecificationsforfoodsafetybigdata

(征求意见稿)

2021-XX-XX发布2021-XX-XX实施

湖北省食品科学技术学会发布

前言

本文件按照GBT1.1-2020给出的规则起草。

本文件由湖北省食品科学技术学会提出。

本文件由湖北省食品科学技术学会团体标准技术委员会归口。

本文件负责起草单位:华中农业大学。

本文件参与起草单位:新东网科技有限公司湖北分公司、武汉市标准化研究院。

本文件主要起草人:XXX。

1

食品安全大数据技术规范

1范围

本文件规定了食品安全大数据的术语和定义,食品安全大数据、大数据采集、大数据共享、大数据

应用、大数据平台、大数据质量评价、大数据体系等的基本要求和规范化操作流程。

本文件适用于食品企业(包括种养殖、收储、加工、流通、餐饮等相关企业)、食品安全监管部门

(例如市场监督管理局、农业局、卫生健康委员会等)、食品质量安全管理系统(软件)、食品质量安

全管理平台开发企业等相关企业或部门使用。

2规范性引用文件

下列文件对于本文件的应用是必不可少的。凡是注日期的引用文件,仅注日期的版本适用于本文件。

凡是不注日期的引用文件,其最新版本(包括所有的修改单)适用于本文件。

CFDAB/T0304-2014食品药品监管信息数据集元数据规范

DB11/T836-2011农业信息资源数据集核心元数据

GB/T38154-2019重要产品追溯核心元数据

GB/T7635.1-2002全国主要产品分类与代码第1部分可运输产品

GB2716-2018食品安全国家标准植物油

GB/T26604-2011肉制品分类

GB/T34262-2017蛋与蛋制品术语和分类

GB2761-2017食品安全国家标准食品中真菌毒素限量

GB2762-2017食品安全国家标准食品中污染物限量

GB2763-2019食品安全国家标准食品中农药最大残留限量

GB29921-2013食品安全国家标准食品中致病菌限量

GB31650-2019食品安全国家标准食品中兽药最大残留限量

GB2760-2014食品安全国家标准食品添加剂使用标准

LS/T1703-2017粮食信息分类与编码粮食及加工产品分类与代码

NY/T1940-2010热带水果分类和编码

SB/T10639-2011蛋与蛋制品分类代码

SB/T10029-2012新鲜蔬菜分类与代码

SB/T11024-2013新鲜水果分类与代码

SC3001-1989水产及水产加工品分类与名称

T/CCOA8-2020稻米质量安全管理与溯源技术规范

T/HBFIA0006-2020乳制品标准化工厂分类技术规范

食品添加剂使用标准《食品生产许可管理办法》——食品生产许可分类目录

3术语和定义

下列术语和定义适用于本文件。

2

3.1

食品安全大数据

食品安全大数据由若干个食品安全数据集合组成,食品安全数据集合来源于不同业态的各种品类的

食品或食用农产品在生产过程或者质量安全管理过程中产生的数据或数组。

3.2

食品安全大数据集合

食品安全大数据集合是指食品生产及消费过程产生的,与食品安全相关的数据组成的集合。食品安

全大数据的数据集合以二维表格的形式出现。二维表格的每一列代表一个或一类特定变量或指标,每一

行都对应于食品安全的某个问题,列与行的交汇点为一个变量的随机数值。数据集合中的变量存在特定

的逻辑关系。

3.3

食品安全信息化

食品安全信息化指进行食品安全产业的信息化建设,即在食品安全管理过程的节点安装并使用相应

的计算机管理信息系统(包括硬件和软件),并利用计算机信息系统来处理食品质量安全管理相关的数据

和流程,以提高食品质量安全的管理的效率。食品安全信息化是获取并使用食品安全大数据的基础。

3.4

食品安全产业链

食品安全产业链是指保障食品安全生产的产业链条。

食品生产全链条指从农田到餐桌所涵盖的种植养殖、收储、加工、物流和营销等若干个节点串联起

来构成的产业链条。每个节点可以包括影响节点信息的若干子节点。

4食品安全大数据技术规范

4.1数据产生、来源与归属

4.1.1数据的产生

食品安全大数据的原始数据主要通过生产主体质量安全管理过程、检验检测结果或检测报告、监督

管理过程、消费过程、消费者的健康监测结果或报告、网络媒体报道等渠道产生。

4.1.2数据来源

食品安全大数据主要来源于计算机信息系统。主要包括管理信息系统、物理信息系统、网络信息系

统和科研信息系统。

通过管理信息系统可以获得企业管理、检验检测、监督管理、健康管理等方面的信息或数据;

通过物理信息系统可以获得由自动化系统、智能化系统等提供的企业管理、检验检测、监督管理、

健康管理等方面的信息或数据;

通过网络信息系统可以获得网络媒体、文献资料等方面的信息或数据;

3

通过科研信息系统可以获得食品属性、技术成果、标准规范等方面的信息或数据。

4.1.3数据归属

数据的归属权属于数据(包括二次或二次以上的数据)的产生单位(或个人),经数据归属人授权

后,第三方(包括单位、团体或个人)有使用数据的权利。

4.2数据集合

食品安全大数据根据来源、应用、特征等分为若干个(或若干类)集合(或数据库),至少包括标

准大数据、生产大数据和管理大数据的数据集合,每类集合可以包括若干子类数据集合,每个数据集合

包含反映食品安全特征的若干指标。图1反映了食品安全大数据和数据集合的产生过程。

1)标准数据集合是执法的依据,包括食品法律法规、食品生产技术规范、检验检测方法、食品安

全事件、食品属性、食材、产品、企业基本信息、投入物、添加物、物流、装备、健康监测

的等方面的标准或规范。

2)生产数据集合为企业管理提供数据信息,应包括不同品类、不同业态、生产过程不同节点的检

验检测(至少包括企业自检数据和国家抽检数据)数据集合。生产数据具有动态和产生频率

高的特点。

——食品产业业态至少包括食品的生产、流通、餐饮。

——生产过程包括从农田、车间到餐桌全产业链,至少含有品种、种植养殖、收储、加工、

流通、营销等主节点,以及影响主节点食品安全的因素,包括投入的农兽药、添加剂和

环境条件等。

——食品品类包括粮食、油脂、水产、畜类、禽类、水果、蔬菜、蛋品和乳品等。可参考《食

品生产许可分类目录》(2020修订版)设置品类,并参考LS/T1703、GB/T7635.1、GB/T

26604、GB/T34262、SB/T10639、SB/T10029、SB/T11024、NY/T1940、SC3001和

T/HBFIA0006等设置下级品类。

3)管理数据应包括企业自身管理和监督管理数据,包括风险分析、溯源和管理决策的数据。主要

用于政府部门、社会、企业自身对食品质量安全的管理。

4)食品安全大数据集合或指标的选择与组合,应遵循食品质量安全体系相关标准或规范,采用科

学合理的控制点和评价指标或参数,包括危害分析的关键控制点(HACCP)、国际标准化组

织标准(ISO)、良好农业规范(GAP)、良好作业规范(GMP)等规定节点、指标或参数

及其标准(或范围)。

5)为了便于数据管理,可以基于原始数据采用数据挖掘、数据融合等技术产生二次或多次数据。

4

图1食品安全大数据和数据集合的产生过程

4.3食品安全大数据特征

食品安全大数据应具有多源异构高维的特征。其中:

1)“多源”至少包括农业种植、畜牧业养殖、工业储运加工、餐饮服务、商超业务和健康监测服务

等数据来源。

2)“异构”至少包括结构化、非结构化(包括网络日志、音频、视频、图片、地理位置信息)等不

同结构的数据。

3)“高维”至少包括时间、空间、对象、产业链节点(4.1.2节2)b中所描述的)、品类(4.1.2节2)c

中所描述的)、指标等6个以上的维度。

4)空间至少包括省份、市县、生产主体地点等三个层次以上的地理位置。

5)对象至少包括料(物料)、法(法律法规、管理制度)、环(环境)3个以上的环节。

6)指标至少包括每个最底层节点对象上的1个以上的指标。成品指标至少包括国家标准制定的危

害因子的指标。

4.4食品安全大数据架构

大数据架构反映了数据采集点(产生点)、数据集合(或数据)的关联关系,反映了数据在大数据

体系中的传递特征、数据在产业链中的分布位置和存在状态。是计算机进行大数据自动关联和智能应用

的基础。

食品安全大数据架构应包括4.2中所描述的标准大数据、生产大数据、管理大数据中数据采集点、

数据集合或数据的关联关系。

4.5数据标准

每一类指标的数据可以通过标准化的编码来描述,并通过相应的元数据标准定义,以便计算机调用、

5

分析和计算。

1)数据编码的结构组成至少包括:产生该数据的责任主体码、食品分类码、时间批次码(参考标

准)和质量安全码(见图2)。其中,质量安全码至少包括危害因子类型码。

责任主体码(8位)食品分类码(13位)生产日期(6位)质量安全码(99位)

XXXXXXXXXXXXX~XXXXXXXXXXXXXXXX~XXXXX

图2食品安全数据编码结构示意图

2)元数据应对数据来源、产生渠道、归属、集合分类、关联关系等信息进行描述。元数据标准可

参考食品品类及生产全过程的相关标准(包括CFDAB/T0304-2014、DB11/T836-2011和GB/T

38154-2019)和规定的危害因子的元数据标准(包括GB2760-2014、GB2762-2017、GB

2761-2017、GB2763-2019、GB31650-2019和GB29921-2013等)。

4.6大数据采集

食品安全大数据的采集主要包括食品安全产业信息化建设、在管理单位或监管部门安装部署相应的

信息系统、端口的数据采集,从而获取原始数据。

4.6.1食品安全信息化建设

食品安全信息化建设至少包括生产过程信息化、监督管理信息化和检验检测信息化。食品安全生产

过程信息化建设至少包括农业种植养殖、收储、加工、流通、营销等过程以及膳食健康的信息化;监督

管理信息化至少包括食品安全政府监管部门和企业自身管理信息化;检验检测信息化至少包括食品名

称、食品种类、理化指标和微生物指标的信息化。

4.6.2原始数据的获取

现场信息系统应配置适宜的数据采集端口或工具(Pc机,手机、RFID、传感器智能感知等),以便

读入原始数据。

4.6.3大数据采集模式

食品安全大数据采集模式包括数据采集方式、采集频率、采集单位(部门)名称、采集设备名称和型

号规格等信息。

1)数据采集方式

应包括人工输入、传感器智能感知、RFID、(二维码)扫码读入和批量导入等。

2)数据采集频率

企业自检频率不低于1次/班,国家抽检频率不低于1次/年。

4.6.4大数据采集规则

4.6.4.1数据集合以二维表格的形式出现,数据采集人员需经过严格训练且获得相关资格;

4.6.4.2数据系统支持修改,但错误操作记录将被永久保存到系统中;

4.6.4.3对数据采集过程、结果、明细、性能、异常进行实时动态监控;

4.6.4.4采集人员完成数据采集后需附加采集电子手写采集时间和个人签名以加强生产现场管理和质

量控制。

4.7食品安全大数据共享

6

食品安全大数据共享应通过食品安全大数据平台将不同系统、不同领域、不同来源的分散、低价值

大数据汇集到食品安全大数据平台上,并有限制地供用户访问和使用。

4.8大数据应用

食品安全大数据主要用于食品质量安全风险控制。它包含三个层次,分别是用于生产企业的食品安

全风险控制、用于政府监管部门对责任区域内的生产企业的食品安全风险预警与应急管理和用于消费者

的风险查询。

4.8.1风险控制

风险控制是指食品企业借助食品安全大数据平台,以减少食品安全事件发生的可能性或减少食品安

全事件发生造成的损失的过程。,至少包括企业生产过程的质量安全隐患的早期发现、提前预警和及时

纠偏。

4.8.2风险预警与应急管理

风险预警与应急管理是指监管部门对管辖区域内的食品企业进行监督检查并开展质量安全监督、执

法和危害溯源的过程。风险预警至少包括监管部门管辖区域的质量安全隐患的早期发现、提前预警、危

害预报和及时纠偏。应急管理包括危害源头的智能识别和危害终点的自动追踪。

4.8.3风险查询

风险查询是指消费者利用二维码和网络搜索等渠道对食品质量安全进行查询和舆论评价的过程。,

风险查询至少包括消费者的质量安全信息查询、质量安全隐患或舆论的早期发现、及时通报和提前防控。

4.8.4智能应用

智能应用是指采用数据挖掘、知识图谱、机器视觉、深度学习等人工智能技术实现食品安全管理自

动化和智能化,以提高管理的可靠性和高效性。

a)食品安全监管智能应用至少包括风险控制智能化和应急管理智能化。

b)风险控制智能化包括食品安全危害的智能感知、食品安全信息智能查询、推理,隐患的智能纠

偏控制和在线溯源。

c)应急管理智能化包括能进行危害源头智能识别,危害传播轨迹的自动追踪与危害终点的确定。

4.9食品安全大数据平台

食品安全大数据平台是一个集食品安全大数据采集、数据整理、分析、应用等功能于一体的平台。

适用于生产企业、政府监管部门和社会(消费者、媒体等)群体或个体使用。数据处理速度应达到秒级秒

级处理TB(或PB)级的海量数据。平台对用户的响应速度应达到百万级数据查询响应速度在3秒内完成。

4.9.1平台基本架构

平台的基本架构应该包括底层支撑、框架后台、数据层、逻辑设计层、逻辑处理层和最终展现层。

底层支撑包括操作系统和基本硬件;框架后台包括计算机语言(例如J2EE/Java)支持能力、数据库技术、

GUI设计模式、Web服务器技术;数据层包括静态数据库和动态实时数据传输系统;逻辑设计层包括

个性化设计和安全控制等板块;逻辑处理层包括数据挖掘算法;最终展现层指以报表、图片及音视频等

形式在电脑或手机端展现的板块。

7

图2食品安全数据采集和分析系统整体架构

4.9.2信息流(数据流)与网络资源分配

平台系统应根据数据流量、数据特点,合理分配计算机网络资源。

按照数据从产生、汇集、整理到应用的传递过程或顺序,可分为近端数据、边缘数据和云端数据。

应采用相应的系统处理这些数据,以保障数据的快速传递与高效应用。

近端系统用以处理近端数据,包括现场系统、数据感知系统、近端存储系统、近端计算系统和数据

反馈系统,具有实时处理现场信息的能力;

边缘系统用以处理边缘数据,包括边缘存储系统和边缘计算系统,具有智能分配网络资源的能力。

云端系统用以处理云端数据,包括云端存储系统、云端计算系统和云端反馈系统,具有智能分配存

储资源的能力。

图3数据流示意图

4.9.3平台基本功能

平台的基本功能应包括集成、云存储、云计算、可视化、网络安全保护等功能。

4.9.3.1集成

集成包括系统集成和功能集成。

a)系统集成至少包括企业管理信息系统、物理信息系统、网络信息系统、科研信息系统等四类信

息系统的集成。系统集成还可以是种植、养殖、收储、加工、流通、餐饮、检验检测、健康监测、膳食

健康、网络媒体和监督管理等节点对应的信息采集系统的集成。

8

b)功能集成至少包括云计算、云存储、数据分析、数据挖掘、信息融合、知识图谱、食品安全风

险控制、智能监管等功能的集成。能进行食品安全风险控制和溯源等应急管理。

4.9.3.2数据整理

数据整理至少包括云计算、数据清洗、数据补全、数据抽取、数据合成分解、数据云存储等功能。

4.9.3.3可视化

a)可视化包括统计数据可视化、管理端口数据可视化、输入端口可视化、查询端口可视化。

b)统计数据可视化至少包括原始分类统计数据可视化、二次或高次统计数据可视化、产业链各节

点统计数据可视化、监督管理统计数据可视化、健康检测统计数据可视化和网络舆情统计数据的可视化。

4.9.4系统安全与信息可信性

食品安全大数据平台应具备系统安全保护与信息可信性认证的功能,以保证食品安全大数据体系的

网络安全、信息安全和数据可靠。

a)系统安全至少满足用户的安全登录与退出、信息的安全保护,具备系统或信息的加密、脱敏、

发布、查阅、上传、下载等功能。

b)信息的可信性认证包括对网站真实性认证,对数据的可靠性认证,建立系统的可信性认证规则,

或权威机构(或部门)的许可授权等。

网站真实性认证至少包括对网站的域名、网站、工商登记或组织机构信息进行交互审核,验证确定

网站的真实身份。

数据可靠性认证至少包括数据来源的真实性校验、数据真实性校验和防止数据被篡改。数据来源的

真实性校验是基于工商登记(生产许可证等证照、食品标签)信息,对数据提供单位(或组织机构)的基本

信息(包括名称、代码、法人、业务范围,地址、证照图案、文本内容等)进行交互审核,验证确定单位

的真实身份。

数据的真实性校验至少包括数据提交人员的身份验证、提交人员的二级签名(提交人员和管理员),

对签名进行真实性验证。应采取有效措施防止数据被篡改。

5食品安全大数据质量评价

大数据质量评价包括对大数据基本特征的评价和优质大数据的评价。

5.1食品安全大数据基本特征

食品安全大数据应具备大数据的5V特征,分别是数据规模大(Volume)、处理速度快(Velocity)、数

据多样性(Variety)、价值密度低(Value)和数据真实性(Veracity)。

5.1.1数据规模

数据规模不低于10亿条数据(相当于2TB容量),增速不低于10万条/日。

5.1.2处理速度

数据处理速度不低于每秒读写次数50000次,吞吐量350MB/s。

5.1.3数据多样性

结构化数据和非结构化数据均不少于总数据量的20%。结构化数据以便于存储的文本为主。

9

5.1.4价值密度

建议信息的价值密度低于1%。

5.1.5数据真实性

数据的真实性理论应为100%。

5.2食品安全优质大数据

优质食品安全大数据应具备全面性、准确性和实用性三个特点。

5.2.1全面性

a)品类全面性:至少包括80%以上的品类食品品类,各品类5个以上产业链节点及国标规定的

90%以上的危害因子的检验检测大数据。

b)环节全面性:至少包括企业管理大数据、检验检测大数据、监督管理大数据、健康监测大数据、

膳食健康大数据、网络媒体大数据、风险管理大数据等环节的大数据。

5.2.2准确性

利用传感器或自动控制系统数据自动采集数据占总数据的50%以上,能快速准确发现食品安全隐

患,实现80%以上环节的提前预警。

5.2.3实用性

至少能应用于某生产主体或监管部门业务流程中80%以上的管理环节。

6食品安全大数据体系

食品安全大数据体系应包含食品安全大数据、食品安全大数据技术、大数据平台用户和大数据服务、

大数据评价等板块,各板块应建立良好的关联关系,以确保食品安全管理业务的顺利开展。

a)食品安全大数据:包括知识库的标准大数据,生产过程大数据,管理大数据。其中生产数据为

全链全品大数据,包括至少50%以上品类和产业链60%以上节点;

b)食品安全大数据技术:包括大数据采集、分析、共享、存储、信息安全、智能应用等;

c)大数据平台用户:包括生产企业(覆盖30%以上的生产企业)、监管单位(覆盖30%以上的监管单

位)、社会团体或个人;

d)大数据服务:包括食品生产企业信息化、食品/食用农产品监管部门信息化、检验检测信息化、

食品质量安全管理、膳食健康、食品安全风险控制、危害溯源、食品安全大数据中心建设、食品安全信

息咨询等方面的服务。

e)大数据体系的主要内容应建立如下关联:

10

图4食品安全大数据体系及内部关系图

食品安全大数据来源于用户平台的各生产企业、监管部门、社会团体或个人。大数据体系通过食品

安全产业的信息化建设,为平台用户提供相应的服务。食品安全大数据技术为体系的运行通过技术支撑。

大数据评价板块为体系运行的效果进行评估。

11

DB4201/T626—2020

目次

前言.........................................................................................................................................................................1

1范围.....................................................................................................................................................................2

2规范性引用文件.................................................................................................................................................2

3术语和定义.........................................................................................................................................................2

3.1食品安全大数据.....................................................................................................................................3

3.2食品安全大数据集合.............................................................................................................................3

3.3食品安全信息化.....................................................................................................................................3

3.4食品安全产业链.....................................................................................................................................3

4食品安全大数据技术规范.................................................................................................................................3

4.1数据产生、来源与归属..........................................................................................................................3

4.2数据集合.................................................................................................................................................4

4.3食品安全大数据特征..............................................................................................................................5

4.4食品安全大数据架构..............................................................................................................................5

4.5数据标准.................................................................................................................................................5

4.6大数据采集.............................................................................................................................................6

4.7食品安全大数据共享.............................................................................................................................6

4.8大数据应用..............................................................................................................................................7

4.9食品安全大数据平台.............................................................................................................................7

5食品安全大数据质量评价.................................................................................................................................9

5.1食品安全大数据基本特征.....................................................................................................................9

5.2食品安全优质大数据...........................................................................................................................10

6食品安全大数据体系........................................................................................................................................10

I

食品安全大数据技术规范

1范围

本文件规定了食品安全大数据的术语和定义,食品安全大数据、大数据采集、大数据共享、大数据

应用、大数据平台、大数据质量评价、大数据体系等的基本要求和规范化操作流程。

本文件适用于食品企业(包括种养殖、收储、加工、流通、餐饮等相关企业)、食品安全监管部门

(例如市场监督管理局、农业局、卫生健康委员会等)、食品质量安全管理系统(软件)、食品质量安

全管理平台开发企业等相关企业或部门使用。

2规范性引用文件

下列文件对于本文件的应用是必不可少的。凡是注日期的引用文件,仅注日期的版本适用于本文件。

凡是不注日期的引用文件,其最新版本(包括所有的修改单)适用于本文件。

CFDAB/T0304-2014食品药品监管信息数据集元数据规范

DB11/T836-2011农业信息资源数据集核心元数据

GB/T38154-2019重要产品追溯核心元数据

GB/T7635.1-2002全国主要产品分类与代码第1部分可运输产品

GB2

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论