面向新型消息业务的垃圾消息管控系统

doi:10.11959/j.issn.1000-0801.2016026

摘要/Abstract

摘要：

从研究新业务背景下的消息业务需求开始，分析了针对新消息监控业务的监控点选择、监控系统架构、系统需要具备的功能以及系统部署需注意的要点。提出了一套满足现阶段监控需求的二级系统架构以及监控系统部署指导原则。

Abstract:

In the background of new business requirements,the monitory point selection for new monitoring business,anti-spam system architecture,the function of the system need and the key points that should pay attention to system deployment were analyzed.Finally a set of two level monitoring system architecture and deployment guidelines for monitoring system were put forward.

Key words: anti-spam, RCS, new business

丁志刚,肖子玉,李雪芳,吉翔川. 面向新型消息业务的垃圾消息管控系统[J]. 电信科学, 2016, 32(1): 164-169.

Zhigang DING,Ziyu XIAO,Xuefang LI,Xiangchuan JI. Anti-spam system of new message business[J]. Telecommunications Science, 2016, 32(1): 164-169.

图/表 9

图1

图2

图3

图4

表1

图5

图6

表2

几种监控功能原理"

监控内容	可采用的监测手段	功能说明	实施建议
文本	关键字匹配	指基于关键词库，通过设置各种关键词组合监测不良内容，可配合基于行为监测的手段提高监测效率。目前消息类业务的监控系统均支持，是目前消息类监控中的有效手段，配置容易，对系统消耗一般	建议此功能优先支持，可作为系统的实时策略配置
	正则表达式	指基于正则表达式的高级文本匹配功能。此功能目前消息类业务的监控系统未支持，因此具体效果未知，功能对策略配置人员技术素质要求高，且对系统性能消耗高，厂商均反馈实现难度较大	建议初期不实现
	相似文本匹配	指基于已有不良文本特征模糊匹配类似的文本内容进行监控，目前消息类业务的监控系统尚未支持，不法分子实际发送消息经常变种，此种监控效果应该是不错的，但相关配置模型复杂，且对系统消耗较高	考虑到现网实施经验不足，系统建设初期可主要依靠关键字匹配功能，建议未来再考虑建设
	特殊字符处理、拆分字、拼音转换等	指将文本中特殊字符转换成正常字符，以便进行内容匹配。目前消息类业务的监控系统均支持此功能，效果较好，配置难度较高，对系统消耗一般	建议优先支持，可作为实时策略配置
图片	基于已知库的图片精确匹配	指基于已有不良图片库，采用散列值比对等方法识别不良图片。此功能目前消息类业务的监控系统已支持，是图片类监控中的有效手段，配置容易，对系统消耗较低	建议优先支持，可作为实时策略配置
	基于已知库的图片模糊匹配	指基于已有不良图片库，通过特征提取等方法识别相似图片。此功能目前消息类业务的监控系统未支持，但对图片监控有重要意义，此功能的监测准确性比较依赖于算法，算法需要提供方有长时间科研经验才能提供，一般系统集成厂商不一定具备能力，另外考虑功能对系统消耗较高	建议初期可暂不实现，未来可通过引入第三方识别引擎的方式纳入系统功能中
	OCR处理	针对采用图片形式发送的文本内容，可通过OCR技术转为文本后执行文本识别算法监控。此功能目前消息类业务的监控系统已有支持案例，但效果一般，对系统消耗高	建议未来支持
	图片涉黄特征识别	采用智能科学技术建模的图片识别算法，可分析图片是否涉黄，目前消息类业务的监控系统已支持，效果依赖于采用的核心算法，对配置者技术要求高，对系统消耗较高，涉黄图片算法属于专有类技术，需要提供方科研经验丰富才能提供	建议此功能推后提供，未来可通过引入第三方识别引擎的方式纳入系统功能中
音频、视频	基于已知库的音视频精确匹配	基于已有音视频文件库，基于散列值比对等方法识别不良音视频，此功能目前消息类业务的监控系统已支持，由于传统短/彩信语音类内容较少，因此效果未知，此功能配置容易，对系统消耗一般	考虑融合通信消息语音内容较多，建议优先支持，针对短音视频作为实时策略配置，长音视频离线检测
	基于已知库的音视频模糊匹配	基于已有音视频文件库，通过特征提取算法识别出类似不良音视频，此功能目前消息类业务的监控系统未支持，根据调研，业界没有成熟的算法，实现功能对系统消耗影响大	建议初期暂不实施
	声音转文字	把自然语音流智能地转化为文字，之后执行文本识别算法。目前消息类业务的监控系统未支持，效果未知，配置难度一般，对系统消耗高	建议未来支持
	对视频抽部分帧后进行图片识别	此功能目前消息类业务的监控系统未支持，效果未知，配置一般，对系统消耗高	建议未来支持
URL	URL库精确匹配	基于已有的恶意URL库监测恶意URL传播，目前消息类业务的监控系统未支持，在不良信息、恶意软件集管系统中有应用，是控制URL 传播的有效手段，配置容易，对系统消耗低	建议优先支持，作为实时策略配置
	通过正则表达式匹配URL	基于正则表达式的高级匹配功能，目前消息类业务的监控系统未支持，效果未知，对策略配置人员要求高，对系统消耗较高	建议未来支持
文件	恶意文件散列比对	基于已有恶意文件散列库，根据散列值比对识别传播的恶意文件，目前消息类业务的监控系统未支持，在恶意软件集管系统采用，是控制恶意软件传播的有效手段，配置简单，对系统消耗较低	建议通过融合通信现有平台能力支持，暂时可不纳入监控系统中
	对可执行文件恶意软件引擎监测	基于已有恶意软件监测引擎对文件进行监测，目前消息类业务的监控系统未支持，在恶意软件集管系统采用，控制恶意软件传播的有效手段，配置复杂，对系统消耗高
行为监测功能	主叫行为分析被叫行为分析	基于主叫用户流量特征进行监测，可结合内容监控应用，目前消息类业务的监控系统支持此功能，是对消息类监控最主要监控手段，配置难度一般，对系统消耗一般基于被叫用户离散度、主被叫比例、被叫号码规律分析进行监测，可结合内容监控应用，目前消息类业务的监控系统不支持，各厂商均反馈能够实现，但现网无技术经验，效果未知，配置难度一般，对系统消耗较高	建议优先支持，作为实时策略配置建议未来支持
	基于名单的监测功能	对于基于传统消息业务的黑名单、白名单、高风险名单进行监测的功能，目前消息类业务的监控系统均支持，也是消息类监控的必备监控手段，配置难度低，对系统消耗低	建议优先支持作为实时策略配置
		配合新消息的业务属性，也可以基于好友名单、通讯录名单、历史记录等来进行信息安全监测，这种监控方式属于新需求，目前消息类业务的监控系统不支持，效果方面可预见是比较有效的监测手段，配置难度一般，但此功能相比一般名单类监测消耗大，需要开通多个系统接口同步名单，对其他系统改造要求高	建议初期阶段暂不实施

表2

图7

比较点	方案优劣	方案1（应用级）	方案2（信令级）	方案3（网络级）
对 RCS 业务平台影响	3＞2＞1	对RCS业务平台要求较高，业务平台需从信令中解析出原始内容、主被叫及监控所需其他信息并按接口封装后传送给监控系统	需在RCS IM业务逻辑中设计有监控平台参与的信令流程，对RCS业务平台本身处理能力消耗不大	此方案对于RCS业务平台没有任何影响
监控平台技术要求	1＞2＞3	接口可采用类似现有垃圾短/彩信监控系统与短/彩中心之间的鉴权接口，对监控平台厂商的开发要求较低，亦不需要监控平台具备从信令解析内容的能力	监控平台作为融合通信业务的一个逻辑实体存在，监控平台需要具备处理 SIP、MSRP、RTP 等协议的能力	对监控平台部署的DPI设备能力要求较高，需能够基于IP、TCP、UDP解析重组SIP、MSRP、RTP等数据分组，还原原始样本内容
获取数据、监控效果	1=2＞3	监控效果较好，能实现实时监控	监控效果较好，能实现实时监控	无法进行实时监控，依赖于网络流量还原，不一定能保证所有数据完整
未来监控策略灵活性	2＞3＞1	灵活性较低，面对监控需求的变更时，需要频繁对业务平台接口进行改造	灵活性较高，所有数据均被监控平台掌握，不依赖于业务平台接口	灵活性适中，所有数据均被监控平台掌握，但对DPI解析能力要求高

[1]	仝杰,刘艳丽,杨德龙,雒宏礼,王欢. 5.8 GHz光纤融合通信在输电线路监测系统中的应用[J]. 电信科学, 2016, 32(7): 166-174.
[2]	沈蕾,吴丽华. 核心网NFV规划建设[J]. 电信科学, 2015, 31(Z1): 153-157.
[3]	吴丽华,沈蕾. 融合通信商用部署关键问题[J]. 电信科学, 2015, 31(Z1): 232-238.
[4]	徐兆吉,刘晓字,张政. 电信运营商关于企业级融合通信技术创新的策略要素分析[J]. 电信科学, 2014, 30(3): 120-126.
[5]	韩建亭,侯象飞,张铮凯. 融合通信业务管理运营模式及实现方案研究[J]. 电信科学, 2012, 28(10): 1-7.
[6]	刘锐,沈晶歆,刘向辉. 智能终端短距离融合通信系统及其关键技术研究[J]. 电信科学, 2012, 28(10): 14-18.
[7]	罗毅,韩建亭,吴亮. 社交化融合通信业务需求分析与发展策略研究[J]. 电信科学, 2012, 28(10): 25-30.
[8]	韩建亭,万象. 全光网络下家庭网络多终端融合通信业务分析与实现方案研究[J]. 电信科学, 2011, 27(5): 17-22.
[9]	廖永红. 双网融合可视电话业务模式分析与架构设计[J]. 电信科学, 2010, 26(9): 123-128.
[10]	王晓鹏,王纯. 基于OSGi和RCP的融合通信客户端的设计与实现[J]. 电信科学, 2010, 26(8): 35-41.
[11]	刘宇昆,王晶,阮稳. 融合通信业务中XDM服务器高可用性的研究与实现[J]. 电信科学, 2009, 25(8): 41-46.