ImageVerifierCode 换一换
格式:PDF , 页数:11 ,大小:458.33KB ,
资源ID:1580487      下载积分:5000 积分
快捷下载
登录下载
邮箱/手机:
温馨提示:
如需开发票,请勿充值!快捷下载时,用户名和密码都是您填写的邮箱或者手机号,方便查询和重复下载(系统自动生成)。
如填写123,账号就是123,密码也是123。
特别说明:
请自助下载,系统不会自动发送文件的哦; 如果您已付费,想二次下载,请登录后访问:我的下载记录
支付方式: 支付宝扫码支付 微信扫码支付   
注意:如需开发票,请勿充值!
验证码:   换一换

加入VIP,免费下载
 

温馨提示:由于个人手机设置不同,如果发现不能下载,请复制以下地址【http://www.mydoc123.com/d-1580487.html】到电脑端继续下载(重复下载不扣费)。

已注册用户请登录:
账号:
密码:
验证码:   换一换
  忘记密码?
三方登录: 微信登录  

下载须知

1: 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。
2: 试题试卷类文档,如果标题没有明确说明有答案则都视为没有答案,请知晓。
3: 文件的所有权益归上传用户所有。
4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
5. 本站仅提供交流平台,并不能对任何下载内容负责。
6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

版权提示 | 免责声明

本文(DB37 T 3523.2-2025 公共数据开放第2部分:数据处理指南.pdf)为本站会员(roleaisle130)主动上传,麦多课文库仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对上载内容本身不做任何修改或编辑。 若此文所含内容侵犯了您的版权或隐私,请立即通知麦多课文库(发送邮件至master@mydoc123.com或直接QQ联系客服),我们立即给予删除!

DB37 T 3523.2-2025 公共数据开放第2部分:数据处理指南.pdf

1、 ICS 35.240 CCS L 70 37 山东省地方标准 DB37/T 3523.22025 代替DB37/T 3523.22019 公共数据开放 第 2 部分:数据处理指南 Public data openingPart 2:Data processing guidelines 2025-12-29 发布 2026-01-29 实施 山东省市场监督管理局 发 布 DB37/T 3523.22025 I 目次 前言.II 引言.III 1 范围.1 2 规范性引用文件.1 3 术语和定义.1 4 总则.2 5 数据清洗比对.2 处理流程.2 处理规则.2 6 数据脱敏.2 处理流程.2

2、处理规则.3 7 数据水印.3 处理流程.3 处理规则.4 8 隐私保护计算.4 处理流程.4 技术框架.4 9 数据处理评价改进.4 附录 A(资料性)数据脱敏方法及示例.6 参考文献.7 DB37/T 3523.22025 II 前言 本文件按照GB/T 1.12020标准化工作导则 第1部分:标准化文件的结构和起草规则的规定起草。本文件是DB37/T 3523公共数据开放的第2部分。DB37/T 3523已经发布了以下部分:第 1 部分:基本要求;第 2 部分:数据处理指南;第 3 部分:开放评价指标;第 4 部分:核心元数据;第 5 部分:数据使用规范。本文件代替DB37/T 3523

3、22019公共数据开放 第2部分:数据脱敏指南,与DB37/T 3523.22019相比,除结构调整和编辑性改动外,主要技术变化如下:a)将“基本原则”更改为“总则”,补充了数据处理原则(见第 4 章,2019 年版的第 4 章);b)增加了“数据清洗比对”一章(见第 5 章);c)将“脱敏规划”“脱敏流程”更改为“数据脱敏”(见第 6 章,2019 年版的第 5 章、第 6 章),保留并概括原脱敏处理流程内容,细化脱敏规则内容;d)增加了“数据水印”一章(见第 7 章);e)增加了“隐私保护计算”一章(见第 8 章);f)增加了“数据处理评价改进”一章(见第 9 章)。请注意本文件的某些内

4、容可能涉及专利。本文件的发布机构不承担识别专利的责任。本文件由山东省大数据局提出并组织实施。本文件由山东省大数据标准化技术委员会归口。本文件起草单位:山东省大数据局、山东省大数据中心、浪潮云信息技术股份公司、山东新一代标准化研究院有限公司。本文件主要起草人:桓德铭、李晓彤、何敬明、石伟、石俊龙、孙亮、张昭、王坤、王溪、李晨、李杨。本文件及其所代替文件的历次版本发布情况为:2019 年首次发布为 DB37/T 3523.22019;本次为第一次修订。DB37/T 3523.22025 III 引言 为促进和规范公共数据开放,提高社会治理能力和公共服务水平,推动数字经济发展,山东省先后印发山东省公

5、共数据开放办法(省政府令第344号)、山东省公共数据开放工作细则(鲁数发20251号)、关于加快推进数据要素市场化配置改革的实施意见(鲁政办字2024124号)等一系列政策文件,对全省公共数据的开放和使用提出要求。为进一步规范和促进山东省公共数据开放工作,针对当前公共数据开放的平台建设、数据处理、开放评价指标、核心元数据、开放数据使用等工作中存在的问题,结合本省实际,制定DB37/T 3523公共数据开放系列标准。DB37/T 3523拟由以下五个部分构成。第 1 部分:基本要求。目的在于规范公共数据开放工作的基本原则和要求。第 2 部分:数据处理指南。目的在于提供公共数据开放工作中数据处理的

6、指导和建议。第 3 部分:开放评价指标。目的在于规范公共数据开放的评价指标的方法和要求。第 4 部分:核心元数据。目的在于规范公共数据开放中核心元数据描述方法和描述内容。第 5 部分:数据使用规范。目的在于规范公共数据开放中公共数据使用的流程和要求。DB37/T 3523.22025 1 公共数据开放 第 2 部分:数据处理指南 1 范围 本文件确立了公共数据开放中数据处理的总则,给出了数据清洗比对、数据脱敏、数据水印、隐私保护计算、评价改进等方面建议。本文件适用于指导公共数据开放主体对开放数据的处理。2 规范性引用文件 下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中,注

7、日期的引用文件,仅该日期对应的版本适用于本文件;不注日期的引用文件,其最新版本(包括所有的修改单)适用于本文件。GB/T 36344 信息技术 数据质量评价指标 GB/T 45574 数据安全技术 敏感个人信息处理安全要求 DB37/T 3523.1 公共数据开放 第1部分:基本要求 DB37/T 3523.3 公共数据开放 第3部分:开放评价指标 DB37/T 4646.2 公共数据 数据治理规范 第2部分:数据清洗比对 3 术语和定义 DB37/T 3523.1界定的以及下列术语和定义适用于本文件。敏感数据 sensitive data 由权威机构确定的受保护的信息数据。注:敏感信息数据的

8、泄露、修改、破坏或丢失会对人或事产生可预知的损害。来源:GB/T 394772020,3.7 数据脱敏 data desensitization 通过一系列数据处理方法对原始数据进行处理以屏蔽敏感数据(3.1)的一种数据保护方法。来源:GB/T 379882019,3.12 数据水印 data watermark 从原始环境向目标环境进行敏感数据(3.1)交换时,通过一定的方法向数据中植入水印标记,同时保留目标环境业务所需的数据特性或内容的数据处理过程。隐私保护计算 privacy-preserving computation 在保证不泄露原始数据的前提下,对数据进行分析计算的一类信息技术。注

9、隐私保护计算的数据在产生、存储、计算、应用、销毁等数据流转全过程的各个环节中“可用不可见”。DB37/T 3523.22025 2 4 总则 宜确保数据处理后的安全可控性,经数据处理后,公共数据利用主体获取满足使用需求的原始数据信息,且原始数据中敏感信息已被移除,无法还原敏感数据的原始信息。宜确保数据处理后数据的真实性、可用性,处理后的数据宜真实地体现原始数据的特征,且保留原始数据中的有意义信息。在开展数据处理工作时,宜注意内容主要包括:a)保持原数据的格式;b)保持原数据的类型;c)保持原数据间的依存关系;d)保持引用完整性;e)保持数据的统计、聚合等特征;f)保持频率分布;g)保持唯一性

10、宜确保数据处理工作的高效经济性,通过程序自动化实现数据处理,并可重复执行。宜确保数据处理工作的稳定可靠性,在同样的处理方法下,保证对相同的原始数据,在各输入条件一致的前提下,无论处理多少次,最终结果相同。宜确保数据处理工作的可配置性和灵活性,按照输入条件不同生成不同的处理结果,按照数据使用场景选择数据处理方法,为公共数据利用主体提供不同的处理数据。5 数据清洗比对 处理流程 公共数据开放中数据清洗比对是对开放数据进行数据探查、数据质量检查、问题数据修正和转化,提升数据质量,宜按照如下流程开展数据清洗比对。a)数据探查:对开放数据的数据库表结构、数据字典等进行探查,形成数据探查清单。b)数据质

11、量检查:按照 GB/T 36344 中数据质量评价指标制定数据检查规则,并根据数据质量检查规则进行数据质量检查,生成数据质量检查报告。c)问题数据修正:对于存在数据质量问题的开放数据,根据数据质量检查报告选择合适的数据修正方法,包括缺失值修正、违规值修正、重复值修正、冲突值修正等。d)数据转换:对通过数据质量检查和问题数据修正的开放数据进行数据格式转换和代码转换等。处理规则 公共数据开放中数据清洗比对的处理规则宜参考DB37/T 4646.2内容。6 数据脱敏 处理流程 公共数据开放中数据脱敏是在开放数据中移除敏感数据,并且确保移除敏感数据后的开放数据无法还原敏感数据,宜按照如下流程开展数据脱

12、敏。a)识别敏感数据:1)对公共数据开放平台内公共数据进行数据内容识别;DB37/T 3523.22025 3 2)根据识别出的数据内容,梳理并总结开放数据敏感数据特征,形成开放数据的敏感数据识别模板;3)识别开放数据在汇聚、关联分析等操作过程中可能产生的敏感数据。b)标识敏感数据:1)根据公共数据分类分级情况,标识开放数据中敏感数据所属类别和敏感程度;2)开放数据中敏感数据识别方法不宜删除和篡改。c)确定脱敏场景:在标识敏感数据基础上,确定开放数据脱敏场景为单一应用场景或复杂应用场景,根据脱敏场景确定处理规则(见 6.2)。d)选择脱敏方法:依据开放数据脱敏场景和处理规则选择数据脱敏方法(见

13、附录 A)。e)定义脱敏规则:依据已选择的数据脱敏方法,结合开放数据的敏感数据实际情况,定义开放数据脱敏规则,并对常用开放数据脱敏规则进行固化,避免重复定义:1)开放数据脱敏规则覆盖所有敏感数据,且表述明确,具备可执行性和可转述性;2)脱敏规则制定降低对业务系统的影响,且不存储原始数据。f)执行脱敏操作:根据已定义的数据脱敏规则执行脱敏操作,遵循个人隐私保护、数据安全保护等相关法规、行业监管规范或标准,个人敏感信息安全符合 GB/T 45574。g)评估脱敏效果:在开放数据脱敏工作完成后,利用测试工具评估和人工评估相结合的方式,对开放数据脱敏情况,以及敏感数据对应用系统功能、性能等方面的影响,

14、根据评估情况优化开放数据脱敏规划,评估内容主要包括:1)数据特征是否变化;2)已知敏感数据是否去除;3)逆向恢复敏感数据的执行难度;4)数据结构和统计特征是否存在敏感性;5)脱敏后的数据是否满足使用需求。处理规则 公共数据开放中数据脱敏主要包括以下处理规则。a)静态脱敏:对原始开放数据进行一次脱敏后,脱敏后的结果数据可多次使用,宜适用于单一应用场景。b)动态脱敏:针对不同公共数据利用主体需求,对开放数据进行屏蔽处理的数据脱敏方式,宜制定安全措施确保公共数据利用主体不能绕过数据脱敏层次直接接触敏感数据,适用于公共数据利用主体需求不确定、应用场景复杂的场景。7 数据水印 处理流程 数据水印是在开放

15、数据中植入水印标记,实现公共数据开放中数据泄露的溯源,宜按照如下流程添加数据水印。a)确定使用场景:确认公共数据开放中数据使用的场景。b)选择水印算法:根据确认的开放数据使用场景,确定开放数据水印处理规则(见 7.2.1)。c)执行水印操作:根据已确定的开放数据水印规则执行添加水印操作。d)评估水印效果:在水印添加完成后,利用测试工具评估开放数据添加水印后对应用系统功能、性能等方面的影响,并根据验证情况优化数据水印处理流程。DB37/T 3523.22025 4 处理规则 7.2.1 公共数据开放中开放数据水印主要包括以下处理规则。a)无痕:在开放数据中随机嵌入不可见字符,改变数据形态,不影响

16、开放数据的展示。b)改行:对符合敏感类型的一行或多行进行数据更改,更改后的开放数据保持与原开放数据同样的类型和格式。c)伪行:在开放数据库表增加非真实数据元组,即增加的行数是伪造出来的,与原始开放数据类似的数据,并在增加的数据元组中嵌入可提取的水印规则信息。d)伪列:伪造新的属性列,包括数据属性列和类型属性列,生成的伪列宜和该关系表的其他属性相关,不易被察觉,然后将水印规则嵌入至伪造新列中。7.2.2 对于发生泄露的开放数据,宜通过导入泄漏的开放数据样本或者文件到水印系统,解析出水印信息并确定泄露源,进行溯源定责。8 隐私保护计算 处理流程 隐私保护计算是在不泄漏原始开放数据的前提下,实现开放

17、数据的安全流通,达到“原始数据不出域,数据可用不可见”的效果,宜按照如下流程开展隐私保护计算。a)数据对接:公共数据开放主体对接开放数据需求,明确提供数据的开放属性,识别确认不予开放数据。b)节点分配:公共数据开放主体选择隐私保护计算数据技术框架(见 8.2),按照确定的隐私保护计算节点软件部署方案部署隐私保护计算节点。c)数据接入:公共数据开放主管部门通过隐私保护计算平台接入开放数据资源,公共数据利用主体通过隐私保护计算平台接入内部数据资源。d)模型部署:公共数据利用主体在隐私保护计算节点创建部署开放数据隐私保护计算模型,并发布服务模型。e)计算实施:公共数据利用主体根据已发布服务模型实施计

18、算并获取相应结果。f)效果评估:公共数据利用主体定期反馈数据利用中发现的各类数据安全风险和质量问题等情况、数据利用成果与效益产出情况至公共数据开放主管部门和公共数据开放主体,公共数据开放主体根据反馈情况持续优化开放数据隐私保护计算规划。技术框架 公共数据开放中隐私保护计算主要包括以下技术框架。a)多方安全计算:利用隐私数据参与保密计算,在参与者在不泄露各自隐私数据情况下,共同完成某项计算任务,适用于性能和规模要求都较高的建模场景。b)联邦学习:实现在本地原始数据不出库的情况下,通过对中间加密数据的流通与处理来完成多方联合的机器学习训练,适用于安全性要求高的场景。c)可信执行环境:通过软硬件方法

19、在中央处理器中构建一个安全的区域,保证其内部加载的程序和数据在机密性和完整性上得到保护,适用于有复杂计算需求的场景。9 数据处理评价改进 宜定期开展开放数据处理评价,评价过程主要包括:DB37/T 3523.22025 5 a)组建开放数据评价团队,制定开放数据处理评价总体要求;b)明确评价范围,包括但不限于应用场景、技术应用、工具技术、执行人员等;c)制定评价指标,围绕数据处理流程、数据处理规则、数据处理效果等过程进行评价,按照 DB37/T 3523.3 制定评价指标;d)选择评价方式,采用多种方式组织开展评价工作,包括资料查阅、人员访谈、功能演示、技术检测等;e)开展评价,收集并整理相关

20、证明材料并开展评价,组织召开会议确认评价结果,输出评价报告。宜根据数据处理评价结果,对公共数据开放中数据处理的流程和规则等进行优化和改进。DB37/T 3523.22025 6 附录A (资料性)数据脱敏方法及示例 数据脱敏方法及示例见表A.1。表A.1 数据脱敏方法及示例 序号 脱敏方法 方法描述 示例 1 掩码 用通用字符替换原始数据中的部分信息,掩码后的数据长度与原始数据一样 将手机号码“13500010001”经过掩码得到“135*0001”2 规整 将数据按照大小规整到预定义的多个档位 将客户资产按照规模分为高、中、低三个级别,将客户资产数据用这三个级别代替 3 替换 以虚构的数据代

21、替真实的数据 将姓名“张三”替换为“王二”4 乱序 对敏感数据进行重新随机分布,混淆原有值和其他字段的联系 将金额“13526”乱序为“65123”5 均化 针对数值型的敏感数据,在保证脱敏后数据集总值或平均值与原数据集相同的情况下,改变数值的原始值 将65、75、90、50均化为79、61、85、55 6 散列 对原始数据取散列值,使用散列值来代替原始数据 将“1234567”取散列值为“0100110”7 数据截断 直接舍弃业务不需要的信息,仅保留部分关键信息 将手机号码“13500010001”截断为“135”8 日期偏移取整 按照一定粒度对时间进行向上或向下偏移取整,可在保证时间数据一

22、定分布特征的情况下隐藏原始时间 将时间“20180101 01:01:09”按照5 s粒度向下取整得到“20180101 01:01:05”9 限制返回行数 仅返回可用数据集合中一定行数的数据 商品配方数据,只有在拿到所有配方数据后才具有意义,可在脱敏时仅返回一行数据 10 限制返回列数 仅返回可用数据集合中一定列数的数据 查询人员基本信息时,对于某些敏感列,不包含在返回数据集中 11 数据分割 将敏感数据拆分为多个部分,并分别存储在不同的物理或逻辑位置,通过分散存储降低单一攻击导致数据泄露的风险 将用户的姓名、地址、电话等信息分别存放在不同的表或字段中,设置严格的访问控制规则,确保只有在特定条件下才能关联查看完整信息 12 数据扰动 数据扰动是一种基于统计学原理的脱敏方法,通过在数据集中引入微小、随机的变化,使个体数据点难以被识别,但保持整体数据分布、相关性和趋势不变 扰动技术包括差分隐私、加噪(如拉普拉斯噪声、高斯噪声)DB37/T 3523.22025 7 参考文献 1 GB/T 379882019 信息安全技术 数据安全能力成熟度模型 2 GB/T 394772020 信息安全技术 政务信息共享 数据安全技术要求

copyright@ 2008-2019 麦多课文库(www.mydoc123.com)网站版权所有
备案/许可证编号:苏ICP备17064731号-1