通信学报 ›› 2013, Vol. 34 ›› Issue (Z2): 170-174.doi: 10.3969/j.issn.1000-436x.2013.Z2.032

• 数字化校园与典型应用 • 上一篇    下一篇

面向大数据的数据服务中心设计与应用研究

刘云峰,李丽,王素美,王倩宜,扬旭,欧阳荣彬,龙新征   

  1. 北京大学 计算中心,北京100871
  • 出版日期:2013-12-25 发布日期:2017-06-16
  • 基金资助:
    国家发展改革委2011年国家信息安全专项基金资助项目

Design and application research on data service platform for big data

Yun-feng LIU,Li LI,Su-mei WANG,Qian-yi WANG,Xu YANG,Rong-bin OUYANG,Xin-zheng LONG   

  1. Computer Center,Peking University,Beijing 100871,China
  • Online:2013-12-25 Published:2017-06-16
  • Supported by:
    2011 National Information Security Special Project Funded by National Development and Reform Commission

摘要:

大数据管理对传统的基于关系数据库管理系统为核心的数据管理服务平台提出了挑战,研究开发支持结构化和非结构化数据统一管理的数据管理与服务中心成为一项非常迫切井且重要的任务,汇总分析出大数据服务中心四项关键技术,采用可配置泛化表模型等技术,设计了基于 Hadoop 平台的数据服务中心系统原型BIG-DMS和基于BIG-DMS的数据综合服务平台应用方案,支持结构化和非结构化数据的统一存储、管理和访问服务。

关键词: 大数据, MapReduce, 数据模型, 数据服务中心

Abstract:

Big data management gives challenges to data manage and service platform based on traditional relational database management system,and research on big data management and service platform supporting both structured and unstructured data has become a very urgent and important task.4 key technologies for big data management service platform was summarized,and the configurable generalization table model was adopt.The data service center system prototype BIG-DMS based on Hadoop platform and the application scheme of data integration services platform based on BIG-DMS were also designed to support both structured and unstructured data storage,management and access services.

Key words: big data, MapReduce, data model,, data service center

[1] 刘伯涛. 移动回传的融合之路[J]. 电信科学, 2009, 25(11): 91 -93 .
[2] 鲜永菊,董灿,张祖凡,吴东伟. LTE-A载波聚合下的载波切换分析[J]. 电信科学, 2009, 25(12): 46 -50 .
[3] 桑俊俊,石胜飞,李建中,熊蜀光. 无线传感器网络分布式单向链路检测算法[J]. 通信学报, 2008, 29(11): 22 -172 .
[4] 曾 益,胡 波,冯 辉. 用于传感器网络的高效分时洪泛时钟同步协议[J]. 通信学报, 2007, 28(5): 2 -14 .
[5] 王俊波,陈 明. 单业务TDD-CDMA系统上行用户容量分析[J]. 通信学报, 2007, 28(6): 8 -53 .
[6] 张 静,胡华平,刘 波,肖枫涛. 基于ASPQ的LDoS攻击检测方法[J]. 通信学报, 2012, 33(5): 10 -84 .
[7] 牛德华,马建峰,马卓,李辰楠,王蕾. 基于属性的安全增强云存储访问控制方案[J]. 通信学报, 2013, 34(Z1): 37 -284 .
[8] 欧智慧,赵亚群. 一类对称布尔函数的研究[J]. 通信学报, 2013, 34(1): 10 -95 .
[9] 刘 龙,宋琦军,赵太飞,元向辉. 基于运动矢量时-空特性的快速运动估计算法研究[J]. 通信学报, 2013, 34(1): 14 -127 .
[10] 彭俊宇,蔡孙增,朱正航,徐景,周婷. 基于MIMO-OFDM的高频段Gbit/s通信系统设计和实现[J]. 电信科学, 2014, 30(6): 95 -101 .