DB15 T 1591-2019 政务数据生命周期管理规范.pdf

1、ICS 35.240.01 L 70 DB15 内 蒙 古 自 治 区 地 方 标 准 DB15/T 1591 2019 政务数据生命周期管理规范 Government data lifecycle management specification 2019-02-20 发布 2019-05-20 实施 内蒙古自治区市场监督管理局 发布 DB15/T 1591 2019 I 目 次 前言 . II 1 范围 . 1 2 规范性引用文件 . 1 3 术语和定义 . 1 4 概述 . 2 5 政务数据采集 . 3 6 政务数据传输 . 3 7 政务数据存储 . 3 8 政务数据处理 . 4 9 政

2、务数据使用 . 6 10 政务数据退役 . 6 DB15/T 1591 2019 II 前 言 本标准按照 GB/T 1.1 2009给出的规则起草。 请注意本文件的某些内容可能涉及专利。 本文件的发布 机构 不承担识别这些专利的责任。 本标准由 内蒙古自治区大数据发展管理局提出并归口。 本标准起草单位： 内蒙古自治区大数据发展管理局 、中国电子技术标准化研究院、内蒙古自治区标 准化院、江苏中堃数据技术有限公司、山东易拓信息咨询有限公司、北京国脉互联信息顾问有限公司。 本标准主要起草人：张世铭、包瑞林、敖继红、周佳琪、翟瑞霞、董建、张群、卫凤林、李冰、尹 卓、王为中、魏清、万欣、张海静、隗玉凯

3、、杨翰学、殷文涛、简文鹏、夏乐乐 李丽、古庆、敖其尔。 DB15/T 1591 2019 1 政务数据生命周期管理规范 1 范围 本标准给出了政务数据生命周 期包含的政务数据采集、政务数据传输、政务数据存储、政务数据处 理、政务数据使用和政务数据退役六个阶段的要求。 本标准适用于内蒙古自治区政务数据的开放共享。 2 规范性引用文件 下列文件对于本文件的应用是必不可少的。凡是注日期的引用文件，仅注日期的版本适用于本文件。 凡是不注日期的引用文件，其最新版本（包括所有的修改单）适用于本文件。 GB/T 35295 2017 信息技术 大数据 术语 GB/T 35589 2017 信息技术 大数据

4、技术参考模型 3 术语和定义 GB/T 35295 2017和 GB/T 35589 2017界定的，以及下列术语和定义适用于本文件。 3.1 政务数据 government data 各级政务部门及其技术支撑单位在履行职责过程中依法采集、生成、存储、管理的各类数据资源。 3.2 数据生命周期 data lifecycle 将原始数据转化为可用于行动的知识的一组过程。 3.3 政务数据提供者 government data provider 基于统一数据共享交换平台 ,利用各种技术向其他政府部门、事业单位、团体机构、企业或公众提 供政务数据的实体。 3.4 政务数据使用者 government

5、 data consumer 使用政务数据 的 实体 ， 包括政府部门、事业单位、团体机构、企业或公众。 DB15/T 1591 2019 2 3.5 政务信息资源 government information resource 政务部门在履行职责过程中制作或获取的，以一定形式记录、保存的文件、资料、图表和数据等各 类信息资源，包括政务部门直接或通过第三方依法采集的、依法授权管理的和因履行职责需要依托政务 信息系统形成的信息资源等。 3.6 政务信息资源 目录 government information resource directory 基于规范的元数据，对政务数据资 源的构成、分类、分

6、布、内容、格式、媒体等特征进行描述的一 组信息，以便于快速有序对政务数据进行定位、检索与获取。 4 概述 政务数据生命周期主要包括政务数据采集、政务数据传输、政务数据存储、政务数据处理、政务数 据使用和政务数据退役六个阶段，结构图见图 1。 图 1 数据生命周期结构图 政务数据采集：组织机构内部系统中新产生数据，以及从外部系统收集政务数据的阶段； 政务数据传输：政务数据从一个实体通过网络流动到另一个实体的阶段； 政务数据存储：政务数据以任何数字格式进行物理存储或云存储的阶段； 政务数据处理：针对政务数据 进行计算、分析、可视化等操作的阶段； 政务数据使用：组织机构及个人发布或访问政务数据的阶段

7、； 政务数据退役：对政务历史数据的管理过程，包括归档和销毁操作。 DB15/T 1591 2019 3 5 政务数据采集 政务数据采集阶段要求如下； a) 应明确政务数据开放共享工作的领导机构和工作机制； b) 应明确政务数据开放共享的组织规划； c) 应实现政务数据的电子化、系统化建设及管理； d) 应对政务数据进行分类分级管理； e) 应对政务数据采集的合规性、正当性和执行上的一致性进行管理； f) 应对政务数据源的身份进行管理，防止数据仿冒和数据伪造； g) 应对政务数据采集过程中采集的数据质量进行管理； h) 应优先采用国家、行业等规范约定的数据格式，宜兼顾不同数据需求方的应用需求；

8、i) 应提供可机读的电子格式及相关软件版本信息； j) 开放共享的数据集应以开放的、非专属的格式提供， 包括 电子文件格式、电子表格格式、图形 图像文件格式、流媒体文件格式、自描述格式等； k) 无法按照要求的形式提供政务数据的，政务数据提供者可通过安排查阅相关资料、提供复制件 或者其他适当形式提供； l) 应提供智能采集、自动采集、半自动采集和手工采集等多种采集方式； m) 应向政务数据采集对象明示数据采集的基本用途。 6 政务数据传输 政务数据传输阶段要求如下： a) 应对数据传输过程中的加密保护措施进行管理，保证传输通道、传输节点和传输数据的安全； b) 应对 数据的传输进行 完整性 保

9、护，包括完整性检测和恢复 ； c) 应对数据传输过程中的网络稳定性进行管理。 7 政务数据存储 政务数据存储阶段要求如下： a) 应按照统一规范编制数据资源目录； b) 应将已编制目录存储到本级共享交换平台，且同步存储到自治区及国家共享交换平台； c) 应根据数据资源共享方式分层、分级存储到相应的共享交换平台； d) 应支持文件的分布式存储机制和分布式数据库系统存储； e) 应支持结构化数据和非结构 化数据的存储； f) 应支持包括批量，交互查询，实时流、内存计算等典型的大数据场景的存储； g) 应对数据存储介质进行管理，防止对介质的不当使用引发数据泄露； h) 应对数据的逻辑存储、存储容器和

10、架构进行管理； i) 应对数据的备份和恢复进行管理。 DB15/T 1591 2019 4 8 政务数据处理 8.1 政务数据预处理 政务数据预处理阶段要求如下： a) 应将来源于本单位政务信息系统的数据库表资源和文件资源进行整理，形成便于政务数据使用 者识别与应用的可共享库表和文件资源； b) 应按规范的流程执行数据清洗加工、标准化、格式化操作，数据处理后满足如下质量要求； 1) 规范性：数据信息 项定义应优先采用国家、行业相关数据标准，各级政务部门实施开放共 享数据工程前应先统一数据标准； 2) 完整性：对于应满足需求的数据记录不应有缺失、重复，数据信息应完整，对敏感数据去 标识化应保证最

11、小颗粒度数据的完整展现； 3) 一致性：不同数据集中描述同一对象的同一度量值在信息含义上不可冲突； 4) 准确性：数据记录的内容应真实反映实际情况且有效，不能存在异常或错误，不能出现不 可识别的内容； 5) 及时性：数据记录应及时更新，保证数据的时效性和准确性。 c) 应进行数据去标识化工作。 8.2 政务数据分析 政务数据分析阶段要求如下 : a) 应支持通过标准 的数据库连接接口进行查询； b) 应支持 REST API 查询接口 进行查询； c) 应支持建立数据索引，达到查询加速的效果； d) 应支持精确查询和模糊查询； e) 宜支持基于规则或者基于成本的查询优化； f) 宜支持数据分片

12、和多副本技术优化查询速度 ； g) 宜支持通过 SQL 进行复杂条件高并发查询； h) 宜支持二级索引； i) 应提供多种数据分析的能力，包括描述性分析、诊断性分析、预测性分析、因果性分析； j) 应 支持多种分析模式 ， 包括离线分析 、 实时分析 和 交互式分析 ； k) 应提供统计分析、机器学习、文本分析、视频分析等多种分析方法、模型和工具； l) 应支持数据挖掘算法 库、图处理算法库； m) 数据分析过程中应采取安全控制措施，防止有价值信息和个人隐私泄露。 DB15/T 1591 2019 5 8.3 政务数据可视化 政务数据可视化阶段要求如下： a) 应支持常见的数据源数据格式作为输

13、入； 示例： Excel、关系型数据库、 JSON、 XML。 b) 应支持对高维数据的可视化展示； c) 支持可视化分析工具库 ,包括以下可视化形式： 1) 应支持柱状图； 2) 应支持饼图； 3) 应支持折线图； 4) 应支持表格； 5) 宜支持散点图； 6) 宜支持雷达图； 7) 宜支持网络图； 8) 可支持时间线； 9) 可支持热力图； 10) 可支持 地图 。 d) 应提供可视化访问界面。 DB15/T 1591 2019 6 9 政务数据使用 政务数据使用阶段要求如下： a) 应支持结构化和非结构化数据访问接口； b) 应支持角色权限管理，包括资源访问权限、操作权限、流程权限等；

14、c) 应支持对不同角色的访问者的登录行为和主要操作进行日志记录； d) 应具备严格的授权访问措施避免日志记录受到未预期的访问、删除、修改或覆盖等； e) 应支持多租户数据访问 的 隔离特性，保证租户之间的数据相互 隔离 ； f) 应对数据导入、导出过程中的安全性进行管理，保证数据自身的可用性和完整性； g) 应对共享数据的安全风险进行控制； h) 应对数据发布过程中的数据格式、适用范围 、发布者与使用者权力和义务进行控制； i) 应建立数据接口的安全管理机制； j) 政务信息资源进行完备性和安全性审查后，应通过政务数据共享交换平台按政务数据共享目录 进行注册发布； k) 审查未通过的政务信息资

15、源应退回政务信息资源提供部门，修改后重新审查，审查通过后进行 注册和发布； l) 审查不予共享的政务信息资源应提供有关依据。 m) 政务数据使用者应根据政务信息资源目录指引，定位目录内容相关联的政务信息资源，从共享 交换平台中获得政务信息资源； n) 政务数据使用者须依照法律法规合理使用数据，不得超出授权范围滥用数据； o) 政务数据使用者对公共数 据开放目录和获取的政务信息资源有疑义或者发现有错误的，应及时 反馈公共数据开放平台予以校核； p) 政务数据使用者对开放目录或开放数据有需求的，应通过公共数据开放平台提出开放需求申 请； q) 政务数据使用者应根据政务信息资源目录指引，定位目录内容

16、相关联的政务信息资源，从共享 交换平台中获得政务信息资源； r) 应建立数据开放共享实时授权制度，并对开放共享数据的时效性进行管理。 10 政务数据退役 10.1 总体 政务数据退役阶段总体要求如下： a) 应根据法律法规、业务、技术等方面需求对数据退役进行需求分析，明确数据的归档和销毁要 求： b) 应建立数据退役 设计方案，包括工作流程和操作规程； c) 应按照数据退役设计方案执行数据退役操作，并根据需求更新数据退役设计。 DB15/T 1591 2019 7 10.2 政务数据归档 政务数据退役阶段总体要求如下： a) 应根据法律法规、业务、技术等方面需求对数据退役进行需求分析，明确数据的归档和销毁要 求； b) 应建立数据退役设计方案，包括工作流程和操作规程； c) 应按照数据退役设计方案执行数据退役操作，并根据需求更新数据退役设计。 10.3 政务数据销毁 政务数据销毁操作要求如下： a) 应建立针对数据内容的清除、净化机制，实现对数据的有效销毁 ； b) 应建立对数据存储介质进行销毁的规程和技 术手段。 _