ICS 35.110 CCS M 11 YD 中华人民共和国通信行业标准 YD/T XXXXXXXX 智慧化工园区大数据平台 第2部分：应用技术要求 Big data platform for intelligent chemical industry park -Part 2: Technical requirements on applications （报批稿） 行业标准信息服务平台 （本稿完成时间：2021.6.14） [××××]-[××]-[××]发布 [××××]-[××]-[××]实施 中华人民共和国工业和信息化部 发布 YD/TXXXXXXXX 目 次 前 言.. 引 言， III 1范围. .1 2规范性引用文件. 3术语和定义， 4缩略语.. 5总体要求 6技术要求. ..2 6.1数据基础准备要求. 6.2数据治理管控要求. 6.3数据开发衍生要求. 6.4业务应用技术要求. 行业标准信息服务平台 YD/T XXXX—XXXX 前言 本文件按照GB/T1.1一2020《标准化工作导则第1部分：标准化文件的结构和起草规则》的规则起 草。 《智慧化工园区大数据平台》系列标准分成四个部分： -第1部分：参考架构 一第2部分：应用技术要求 一第3部分：综合业务管理技术要求 一第4部分：平台运维管理技术要求 本文件为第2部分 请注意本文件的某些内容可能涉及专利。本文件的发布机构不承担识别这些专利的责任。 本文件由中国通信标准化协会提出并归口。 本文件起草单位浙江航天恒嘉数据科技有限公司、清华大学公共安全研究院、郑州信大捷安信息 技术股份有限公司、嘉兴港区开发建设管理委员会。 本文件主要起草人：魏民、刘勇、刘为华、刘华、刘浩、宋春红、王利花。 行业标准信息服务平台 II YD/T XXXX—XXXX 引言 化工园区是由多个相关联的化工企业构成，以发展石化和化工产业为导向、地理边界和管理主体明 确、基础设施和管理体系完整的工业区域。智慧化工园区则是围绕着园区的安全生产、环境管理、应急 管理、封闭化管理、运输管理、能源管理、办公管理、公共服务和保障体系等业务应用领域，通过数据 整合与信息平台建设以实现智能化管理与高效运行的化工园区。 2015年工信部颁布了《关于促进化工园区规范发展的指导意见》，对化工园区的科学规划、规范建 设、高效管理提出了全面要求。《意见》发布的同时，中国化工新材料（嘉兴）园区已在以往园区安全 应急管理系统和环境管理系统之上，通过数据整合与信息平台建设等方式开始了智慧化工园区的建设工 作。随后建立了支撑智慧化工园区建设的嘉兴港区智慧化工园区标准体系。在该标准体系中，智慧化工 园区大数据平台是智慧化工园区标准化活动的基础和通用标准。在这方面，国内外尚未提出智慧化工园 区大数据平台相关规范与技术应用要求的标准。 智慧化工园区大数据平台系列标准便是为规范智慧化工园区大数据平台应用而起草的，拟由以下四 个部分的结构和名称所构成： 第1部分：参考架构。自的在于提出智慧化工园区大数据平台的逻辑架构，明确智慧化工园区 大数据平台的数据输入源、各功能模块以及输出应用等组成部分之间的关系。 一一第2部分：应用技术要求。目的在于明确智慧化工园区的安防管理、环保监测、能源管理、地 理信息管理、物流管理以及消防管理等应满足怎样的功能和技术要求。 一一第3部分：综合业务管理技术要求。目的在于对前一部分各分散业务应用进行统一和集中的综 合管理，为智慧化工园区各级政府部门或不同企业单位等提供便于应用管理与应急指挥的要求， 以明确前3部分所建立的大数据平台及其应用和管理等稳定持续的运行。 本文件为该系列标准的第2部分应用技术要求。主要规定智慧化工园区大数据平台的应用技术要求， 包括总体要求以及数据基础能力、数据增值开发、数据治理管控等功能模块和园区各主要业务应用的要 行业标准信息服务平台 求。 III YD/TXXXXXXXX 智慧化工园区大数据平台第2部分应用技术要求 1范围 本文件规定了智慧化工园区大数据（以下简称“智慧数据”）平台的技术应用规范，规定了总体要 求和各组成部分的技术应用功能要求。 本文件适用于智慧数据平台的技术开发和应用。 2规范性引用文件 下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中，注日期的引用文件， 仅该日期对应的版本适用于本文件。不注日期的引用文件，其最新版本（包括所有的修改单）适用于本 文件。 GB/T35295-2017信息技术大数据术语 GB/T37721-2019信息技术大数据分析系统功能要求 GB/T38673-2020信息技术大数据大数据系统基本要求 GB/T39218-2020 智慧化工园区建设指南 3术语和定义 GB/T35295-2017界定的以及下列术语和定义适用于本文件。 3.1 数据集data set 数据记录汇聚的数据形式。 3. 2 数据仓库database 在数据准备之后用于永久性存储数据的数据库 [来源：GB/T35295-2017，2.1.35] 3.3 结构化数据structureddata 种数据表示形式，按此种形式，由数据元素汇集而成的每个记录的结构都是一致的并且可以使用 关系模型予以有效描述。 [来源：GB/T35295-2017，2.2.13] 1 YD/T XXXX—XXXX 3. 4 非结构化数据unstructureddata 不具有预定义模型或未以定义方式组织的数据。 [来源：GB/T35295-2017，2.1.25] 4缩略语 下列缩略语适用于本文件。 GIS：地理信息系统（Geographic Information System） GPS：全球定位系统（GlobalPositioningSystem） 5总体要求 智慧数据平台的应用技术要求应至少符合GB/T37721-2019、GB/T38673-2020和GB/T39218-2020 界定的要求，同时应具备数据基础准备、治理管控、开发衍生和业务应用四方面的技术功能要求 6技术要求 6.1数据基础准备要求 6.1.1 数据接入 在将数据从外部数据源加载到数据平台的过程中，应满足以下要求： a) 从智慧数据提供者的数据源接入传感器终端硬件设备数据、位置数据、其它第三方系统数据： b) 使用的接口类型变量通用，使大多编程语言都能支持； 编码格式统 一 6. 1. 2 数据清洗 清洗过滤不符合要求的不完整的、错误的、重复的数据，应满足以下要求： 对数据进行一致性检查，判断数据是否符合要求，以发现超出正常范围、逻辑上不合理或者相 a) 互矛盾的数据； b) 对无效值和缺失值采用估算、整例删除、变量删除、成对删除等方法，以保证数据的完整性。 6. 1. 3 数据存储 将数据以某种格式记录在计算机内部或外部存储介质上，包括数据流在加工过程中产生的临时文件 或加工过程中需要查找的信息，应支持多种存储方式，涉及关系型数据库以及图形存储、内存存储、文 档存储和空间数据等非关系型数据库。 a）关系型数据库应满足以下要求： 1）表中的每个列都有名称和类型，表中所有记录都符合表的定义； 2）表中的记录可以被创建和删除，记录中的字段也可以单独更新； 3）提供事务处理机制，为设计多条记录的自动化处理提供解决方案。 b) 图形数据库应满足以下要求： 1）有不同的图模型来映射事务之间的网络关系： 2 YD/T XXXX—XXXX 2）有各种对象的建模来反映这些事务之间的相互关系。 c）内存存储数据库应满足以下要求： 1）能够将数据存储在内存中，以提高数据读取效率； 2）提供并发控制、恢复、完整性和安全性方面的数据控制功能； 3）为用户提供方便的用户接口。 d）文档存储应满足以下要求： 1) 支持对结构化数据的访问； 2) 支持查询语言具有搜索嵌套对象的嵌套存储能力； 3) 文档存储模型应支持嵌套结构以及数组和列值键。 空间数据存储应满足以下要求： 1）将一种地物类型映射为一个属性数据表进行存储； 2) 能够将属性数据和空间数据实现联合管理； 具有空间多尺度性和时间多尺度性。 f) 数据存储扩展应满足以下要求： 1）具有高可扩展性，能够动态地增添存储节点以实现存储容量的线性扩展； 2) 具有高并发性，能及时响应大规模用户的读写请求，能对海量数据进行随机读写； 3) 具有容错机制，实现对数据的穴余备份，保证数据和服务的高度可靠性。 6.1.4数据融合 利用不同时间与空间的多传感器数据资源，采用计算机技术对按时间序列获得的多传感器观测数据 加以分析、联合、及相关组合，支配和使用，获得对被测对象的一致性解释与描述，进而实现相应的决 策以及其重要程度实时、完整评价的处理过程，应满足以下要求： a）支持结构化数据、半结构化数据、非结构化数据等不同类型的数据源； b) 提供数据的实时传输和处理能力； 提供结构化数据、半结构化数据的抽取、转换和加载功能； (P 提供非结构化数据的自动半自动的识别、提取、标注等数字化手段； 提供整合与处理的工具或构件及监控管理功能。 6. 1. 5 数据计算 对智慧数据平台的各种相关数据进行计算并获得结果，应采用分布式数据计算方式。 6.1.6数据分析 为了最大化地开发数据、发挥数据的作用并提取有用信息和形成结论，应对数据加以详细研究和概 括总结，在此过程中满足以下要求： a）提供统计分析、机器学习、文本分析、视频分析、数据挖掘等多种分析方法、模型和工具； b) 视频分析应以图形、图像、地图、动画等更为生动的方式，展现数据中存在的关系、特征或趋 势； c) 数据分析应包括描述性分析、诊断性分析、预测性