一种基于保形加密的大数据脱敏系统实现及评估

doi:10.11959/j.issn.1000-0801.2017059

电信科学 ›› 2017, Vol. 33 ›› Issue (3): 119-125.doi: 10.11959/j.issn.1000-0801.2017059

一种基于保形加密的大数据脱敏系统实现及评估

卞超轶^1,²,朱少敏¹,周涛¹

¹ 北京启明星辰信息安全技术有限公司，北京100193
² 北京邮电大学，北京100876

修回日期:2017-02-24 出版日期:2017-03-01 发布日期:2017-04-05
作者简介:卞超轶（1987-），男，北京启明星辰信息安全技术有限公司高级研究员，启明星辰博士后工作站——北京邮电大学博士后流动站联合培养博士后，主要研究方向为大数据自身安全、大数据安全分析等。|朱少敏（1983-），男，北京启明星辰信息安全技术有限公司前线技术专家团成员，主要研究方向为电力系统信息安全、多媒体信息处理等。|周涛（1979-），男，博士，北京启明星辰信息安全技术有限公司教授级高级工程师，主要研究方向为大数据安全分析、事件关联分析、入侵检测等。

Implementation and evaluation of big data desensitization system based on format-preserving encryption

Chaoyi BIAN^1,²,Shaomin ZHU¹,Tao ZHOU¹

¹ Beijing Venus Information Security Technology Incorporated Company, Beijing 100193, China
² Beijing University of Posts and Telecommunications, Beijing 100876, China

Revised:2017-02-24 Online:2017-03-01 Published:2017-04-05

摘要/Abstract

摘要：

数据脱敏，是指对数据中包含的一些涉及机密或隐私的敏感信息进行特殊处理，以达到保护私密及隐私信息不被恶意攻击者非法获取的目的。保形加密是众多数据脱敏技术的一种，但其具有保持原始数据格式不变的重要优势，从而在一定程度上对上层应用透明。随着大数据时代的到来以及Hadoop平台的广泛应用，传统的基于关系型数据库的数据脱敏技术已不能满足实际的生产需要。针对Hadoop大数据平台实现了一种基于保形加密的数据脱敏系统，支持对多种数据存储格式以及纯数字、纯字母或数字—字母混合等多种数据类型敏感数据的加密脱敏处理。然后对3种不同的实现方式进行了探讨，并开展了一系列实验对系统的加密脱敏性能进行详细的评估比较。

关键词: 大数据, 数据脱敏, 保形加密, 系统, 评估

Abstract:

Data desensitization is a process that makes some special transformations on sensitive data in order to protect the secrecy and privacy from being acquired by malicious attackers.Format-preserving encryption is one of the techniques of data desensitization, which has the advantage of keeping data format unchanged so that the upper layer applications are not affected.Along with the coming of big data and the wide application of the Hadoop platform, data desensitization techniques for traditional relational database management systems cannot satisfy the need of production. A data desensitization system based on format-preserving encryption for Hadoop platform was implemented, which provided the encryption support for multiple data storage formats and data value types. Moreover, three different sorts of implementations were discussed, and a series of experiments were carried out to evaluate the performance.

Key words: big data, data desensitization, format-preserving encryption, system, evaluation

中图分类号:

TP309.2

卞超轶,朱少敏,周涛. 一种基于保形加密的大数据脱敏系统实现及评估[J]. 电信科学, 2017, 33(3): 119-125.

Chaoyi BIAN,Shaomin ZHU,Tao ZHOU. Implementation and evaluation of big data desensitization system based on format-preserving encryption[J]. Telecommunications Science, 2017, 33(3): 119-125.

图/表 7

图1

图2

表1

图3

图4

表2

图5

参考文献 16

[1]	BLACK J , ROGAWAY P . Ciphers with arbitrary finite domains[M]. Berlin Heidelberg: Springer, 2002
[2]	SPIES T . Feistel finite set encryption mode[J/OL]. NIST Proposed Encryption Mode. 2008: 1-10. (2008-01-24)[2016-07-01]. .
[3]	BELLARE M , RISTENPART T , ROGAWAY P , et al. Format-preserving encryption[C]// Selected Areas in Cryptography, March 4-9, 2009, Berlin, Germany. Berlin Heidelberg:Springer. 2009: 295-312.
[4]	BELLARE M , ROGAWAY P , SPIES T . The FFX mode of operation for format-preserving encryption[J]. Unpublished Nist Proposal, 2010,136(9): 633.
[5]	BRIER E , PEYRIN T , STERN J . BPS: a format-preserving encryption proposal[J/OL]. NIST submission, 2010: 1-11. (2010-04-04)[2016-07-01]. .
[6]	DWORKIN M . Recommendation for block cipher modes of operation:methods for format-preserving encryption[J]. NIST Special Publication, 2013（800）: 38.
[7]	刘哲理，贾春福，李经纬 . 保留格式加密模型研究[J]．通信学报， 2011,32(6):184-190.
	LIU Z L , JIA C F , LI J W . Research on the format-preserving encryption modes[J]. Journal on Communications, 2011,32(6): 184-190.
[8]	刘哲理，贾春福，李经纬 . 保留格式加密技术研究[J]．软件学报， 2012,23(1):152-170.
	LIU Z L , JIA C F , LI J W . esearch on the format-preserving encryption techniques[J]. Journal of Software, 2012,23(1):152-170.
[9]	李敏，贾春福，李经纬 , 等. 变长编码字符型数据的保留格式加密[J]．吉林大学学报：工学版 2012,42(5):1257-1261.
	LI M , JIA C F , LI J W , et al. Format-preserving encryption for variable-length encoding character data[J]. Journal of Jilin University： Engineering and Technology Edition, 2012,42(5):1257-1261.
[10]	李经纬，贾春福，刘哲理 , 等. 基于k-分割Feistel网络的FPE方案[J]．通信学报， 2012,33(4):62-68.
	LI J W , JIA C F , LIU Z L , et al. FPE scheme based on k-splits feistel network[J]. Journal on Communications, 2012,33(4):62-68.
[11]	HP． HP security voltage[EB/OL]. (2015-02-09)[2016-03-01]. .
[12]	Apache Software Foundation． Apache Hadoop[EB/OL]. (2011-12-10)[2016-07-01]. .
[13]	Apache Software Foundation． Apache Spark[EB/OL]. (2014-05-30)[2016-07-01]. .
[14]	Pentaho． Data integration-Kettle[EB/OL]. (2009-05-14)[2016-07-01]. .
[15]	Cloudera． Cloudera CDH[EB/OL]. (2012-10-12)[2016-07-01]. .
[16]	Hortonworks． HORTONW0RKS data platform（HDP）[EB/OL]. (2012-11-30)[2016-07-01]. .

	戴尔PowerEdge R720	联想ThinkPad T440p
CPU	Intel Xeon CPU E5-2603 v2@1.80 GHz,8核心	Intel Core i5-4210M CPU@2.60 GHz,4核心
内存	64 GB DDR3 1 600 MHz	4 GB DDR3 1 600 MHz

数据量/条		处理速度/（条·s^-1）
数据量/条	简单单机模式	ETL工具模式	Spark并行模式
10⁶	4 847.5	15 923.6	23 888.9
10⁷	5 050.2	15 969.3	68 426.5
10⁸	4 967.0	15 860.4	83 151.0

一种基于保形加密的大数据脱敏系统实现及评估

Implementation and evaluation of big data desensitization system based on format-preserving encryption

在线阅读

PDF下载

可视化

被引次数

摘要/Abstract

引用本文

使用本文

图/表 7

参考文献 16

相关文章 15

Metrics

推荐阅读 0

[1]	韩璐, 陈威宇, 张斐, 何建锋, 苏怀振. 差异化需求下的非关系型分布式报送信息大数据分类方法[J]. 电信科学, 2023, 39(6): 114-121.
[2]	周胜利, 蒋可怡, 徐博, 徐睿, 张熙康, 赵泉喆, 徐阳东. 面向电信网络诈骗治理的网络安全课程构建效能评估研究[J]. 电信科学, 2023, 39(6): 122-128.
[3]	韩雪. 基于电力大数据的电力骨干通信网络毁伤韧性评估方法[J]. 电信科学, 2023, 39(5): 136-143.
[4]	王建斌, 王淑春, 廖尚金, 施淑媛. 基于DCNN-LSTM负荷预测算法的5G基站节能系统研究[J]. 电信科学, 2023, 39(4): 133-141.
[5]	徐亮, 王烨, 郑然, 张基恒, 袁萍, 李鑫阳, 田宇. 通信网络运维多维评估模型设计及应用[J]. 电信科学, 2023, 39(4): 142-151.
[6]	马春野, 陈浩, 彭剑坤, 于双志. “双智”城市建设系统架构、挑战与展望[J]. 电信科学, 2023, 39(3): 16-23.
[7]	葛雨明, 毛祺琦. 车联网新型基础设施跨域协同部署研究[J]. 电信科学, 2023, 39(3): 24-31.
[8]	骆琼华, 王鸿奎, 殷海兵, 邢亚芬. 基于熵掩蔽的DCT域恰可察觉失真模型[J]. 电信科学, 2023, 39(2): 59-70.
[9]	孙玉娣. 基于电信大数据的5G网络海量用户复访行为预测模型[J]. 电信科学, 2023, 39(2): 157-162.
[10]	王晓云, 段晓东, 孙滔. 平台化服务网络——新型移动通信系统架构研究[J]. 电信科学, 2023, 39(1): 20-29.
[11]	巩传兵, 杨明帅, 吴松, 葛海平, 张守国, 刘磊, 祁云山, 徐辉. 基站价值评估模型的应用研究[J]. 电信科学, 2023, 39(1): 100-107.
[12]	杜书, 马玫, 赵波, 曾琦, 刘星. 用于电力物联网随机接入的低碰撞跳频通信系统[J]. 电信科学, 2023, 39(1): 117-125.
[13]	章坚武, 安彦军, 邓黄燕. DNS攻击检测与安全防护研究综述[J]. 电信科学, 2022, 38(9): 1-17.
[14]	李爱华, 吴晓波, 陈超, 魏彬, 史嫄嫄. 5G网络大数据智能分析技术[J]. 电信科学, 2022, 38(8): 129-139.
[15]	黄更生, 黄宇红, 郭漫雪, 郑健平, 葛欣. DT时代面向数据服务的新型基础设施架构[J]. 电信科学, 2022, 38(7): 138-145.