能源大数据数据归集规范DB12T1304-2024.pdf

ICS 35.240.50 CCS L 67 12 天津市地方标准 DB12/T 13042024 能源大数据 数据归集规范 Energy big data Data ingestion specification 2024-02-19 发布 2024-03-19 实施 天津市市场监督管理委员会 发 布 DB12/T 13042024 I 前言 本文件按照GB/T 1.12020标准化工作导则 第1部分：标准化文件的结构和起草规则的规定起草。本文件由天津市互联网信息办公室提出并归口。本文件起草单位：国网天津市电力公司、天津市大数据管理中心、天津大学、天津能源投资集团有限公司。本文件主要起草人：王洋、杨一帆、项添春、边柯柯、刘宁、刘津、孔祥玉、张永跃、周虎、王旭强、王尊、班全、张毅、于海涛、董阳、郑阳。DB12/T 13042024 1 能源大数据 数据归集规范 1 范围 本文件规定了能源大数据的数据归集范围、数据归集流程、数据归集要求、数据维护要求和数据安全要求。本文件适用于市、区、园区等各级能源大数据中心的能源数据归集工作。2 规范性引用文件 下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中，注日期的引用文件，仅该日期对应的版本适用于本文件；不注日期的引用文件，其最新版本（包括所有的修改单）适用于本文件。GB/T 35295-2017 信息技术 大数据 术语 GB/T 36073-2018 数据管理能力成熟度模型 GB/T 37973-2019 信息安全技术 大数据安全管理指南 GB/T 37988-2019 信息安全技术 数据安全能力成熟度模型 GB/T 38673-2020 信息技术 大数据 大数据系统基本要求 GB/T 38664.1-2020 信息技术 大数据政务数据开放共享 第1部分：总则 3 术语和定义 下列术语和定义适用于本文件。3.1 能源 energy 可以直接或通过能量转换方式从原材料、自然资源及技术系统中提取或回收能量的资源，包括煤炭、原油、天然气、煤层气、核能、风能、太阳能、地热能、生物质能等一次能源和电力、热力、成品油等二次能源。3.2 能源大数据 energy big data 包括能源类数据、政务数据、其他数据。3.3 能源大数据中心 energy big data center 区域内全品种全过程能源大数据和相关公共数据采集、汇聚、加工、应用的数据中心。3.4 数据提供者 data provider 将数据或信息引入能源大数据中心的公司或组织，用以提供数据给其他参与方进行数据访问、处理和分析。注：数据提供者一般包括：企业、公共机构、科学家、调研人员、从事数据搜索的工程师、网络应用软件、网络运营商和末端用户。来源：GB/T 35295-2017，2.1.5 DB12/T 13042024 2 3.5 结构化数据 structured data 一种数据表示形式，按此种形式，由数据元素汇集而成的每个记录的结构都是一致的并且可以使用关系模型予以有效描述。来源：GB/T 35295-2017，2.2.13 3.6 非结构化数据 unstructured data 不具备预定义的数据模型或固定格式的数据类型。3.7 数据安全 data security 保护数据的机密性、完整性和可用性。来源：GB/T 36073-2018，3.11 3.8 数据质量 data quality 在指定条件下使用时，数据的特性满足明确的和隐含的要求的程度。来源：GB/T 36073-2018，3.10 3.9 政务数据 government statistics 各级政务部门及其技术支撑单位在履行职责过程中依法采集、生成、存储、管理的各类数据资源。注：根据可传播范围，政务数据一般包括可共享政务数据、可开放公共数据及不宜开放共享政务数据。来源：GB/T 38664.12020，3.1 3.10 数据归集 Data ingestion 从各种来源收集信息，并将其以汇总格式呈现以进行数据处理或分析的过程。4 总体要求 数据归集工作在采集、传输、存储、处理等方面安全应符合 GB/T 37973-2019 的要求。4.1 数据归集应具备可追溯性，记录并保留归集过程中历史数据的变化和移动情况。4.2 数据归集应具备数据完整性，数据归集过程中不应造成数据的缺失和遗漏。4.3 数据归集应具备数据一致性，应如实准确地处理数据，且与源端数据保持一致。4.4 能源大数据数据归集架构图见图 1。4.5 DB12/T 13042024 3 图1 能源大数据中心数据归集架构图 5 数据归集范围 能源大数据中心负责能源类数据、政务数据、其他数据归集工作；涉及的政务数据需按政务信息资源共享管理办法要求，完成政务类数据对接工作后向能源