一种基于投影寻踪的电信网络数据处理方法

doi:10.11959/j.issn.1000-0801.2016322.

摘要/Abstract

摘要：

在大数据时代，运营商采集和处理的数据出现了爆炸式增长。与此同时，采集数据维度增长使得从数据中提取信息的难度大大提高，导致了运营商新增的计算能力并没有带来与之匹配的信息处理能力提升。造成这一现象的主要原因在于并非所有维度上都有运营商关心的信息，过高的维度反而带来额外的噪音。因此，根据数据特性选择适当的维度十分必要。基于上述考虑，提出了一种基于投影寻踪的数据处理方法，并通过基于实际网络数据的对比验证了本文所述方案的有效性。

关键词: 网络管理, 降维, 投影寻踪

Abstract:

In the big data era, the data which operator can collect and process is quickly growing. At the same time, due to the high dimension of the data, it is very difficult to extract and process information from them. This makes the waste of the computing capability of operators, even may lead to the decrease of performance due to the growth of the data dimension. The main reason of this phenomenon is that not all dimensions are interested with the information. Therefore, it is necessary to select the appropriate dimensions according to the data characteristics. Based on this, a data processing method based on projection pursuit was proposed. The result demonstrates the effectiveness of the scheme.

Key words: network management, dimension reduction, projection pursuit

赵晋明. 一种基于投影寻踪的电信网络数据处理方法[J]. 电信科学, 2016, 32(12): 144-148.

Jinming ZHAO. Data processing method for telecom data based on projection pursuit[J]. Telecommunications Science, 2016, 32(12): 144-148.

图/表 6

图1

图2

图3

图4

图5

图6

[1]	BELLMAN T E . Adaptive control processes[M]. Princeton: Princeton University Press， 1961.
[2]	MAATEN L J P V D , POSTMA E O , HERIK H J V D . Dimensionality reduction: a comparative review[J]. Journal of Machine Learning Research, 2007,10(1).
[3]	CARREIRA-PERPINAN M A . Continuous latentvariablemodels for dimensionalityreduction and sequentialdatareconstruction[EB/OL]. (2001-01-29)[2016-11-02]. .
[4]	DONOHO D L . High dimensional data analysis: the curses and blessings of dimensionality[EB/OL]. (2000-01-29)[2016-11-02]. .
[5]	DIACONIS P , FEREDMNA D . Asymptotics of graphical projection pursuit[J]. Annals of Statistics, 1984,12(3): 793-815.
[6]	张维明 . 数据仓库原理与应用[M]. 北京: 电子工业出版社， 2002. ZHANG W M . The principle and application of data warehouse[M]. Beijing: Publishing House of Electronics Industry, 2002.

[1]	胡骞, 赵国永, 霍晓莉, 李俊杰, 荆瑞泉, 闫飞, 武晓锋. 灰盒光传输设备的SDN管控技术研究及应用[J]. 电信科学, 2021, 37(12): 93-100.
[2]	于海青,丁伟,徐杰. 高速网络访问超点实时检测算法精度分析[J]. 电信科学, 2020, 36(4): 74-82.
[3]	徐明,杨雪,章坚武. 移动设备网络流量分析技术综述[J]. 电信科学, 2018, 34(4): 98-108.
[4]	赵晋明. 一种基于随机映射的网络状态评估方法[J]. 电信科学, 2016, 32(8): 164-168.
[5]	宋阿芳,林联,王发光. 通信网管系统云化部署及迁移问题研究[J]. 电信科学, 2015, 31(6): 103-108.
[6]	柴智. 一种基于最优控制的网络管理整体策略[J]. 电信科学, 2015, 31(11): 189-192.
[7]	曹旭,曹瑞彤. 基于大数据分析的网络异常检测方法[J]. 电信科学, 2014, 30(6): 152-156.
[8]	马学刚. 一种WLAN拓扑管理系统[J]. 电信科学, 2014, 30(12): 153-159.
[9]	余颖. 发电企业信息安全保障体系建设[J]. 电信科学, 2014, 30(1): 148-152.
[10]	马迪,沈烁. 基于本地信任锚点管理的RPKI安全运行机制研究[J]. 电信科学, 2013, 29(9): 55-59.
[11]	梁颐涵,周　函,王井龙,李　飞. 统一接口平台在中国电信WDM综合网络管理系统中的应用[J]. 电信科学, 2013, 29(7): 148-152.
[12]	宋阿芳,徐伟. IMS网络管理系统特点及部署问题研究[J]. 电信科学, 2011, 27(9): 6-10.
[13]	谢明,侯象飞,刘文超,李士龙. 光进铜退下家庭网络管理体系架构研究[J]. 电信科学, 2011, 27(5): 29-32.
[14]	黄挺,谢文旭,王燕川. 云计算在电信网络管理系统中的应用与实践[J]. 电信科学, 2011, 27(4): 119-122.
[15]	李裕岭. 城域传送网的业务需求及发展[J]. 电信科学, 2004, 20(6): 27-30.