CNTXJ.NET | 通信界-中国通信门户 | 通信圈 | 通信家 | 下载吧 | 说吧 | 人物 | 前瞻 | 智慧(区块链 | AI
 国际新闻 | 国内新闻 | 运营动态 | 市场动态 | 信息安全 | 通信电源 | 网络融合 | 通信测试 | 通信终端 | 通信政策
 专网通信 | 交换技术 | 视频通信 | 接入技术 | 无线通信 | 通信线缆 | 互联网络 | 数据通信 | 通信视界 | 通信前沿
 智能电网 | 虚拟现实 | 人工智能 | 自动化 | 光通信 | IT | 6G | 烽火 | FTTH | IPTV | NGN | 知本院 | 通信会展
您现在的位置: 通信界 >> 数据通信 >> 技术正文
 
基于垃圾短信发往方向频次流量的大数据相关性分析
[ 通信界 | 秦保根 | www.cntxj.net | 2018/11/10 9:53:27 ]
 

垃圾短信纷繁多样,给电信运营商的拦截带来极大的困扰,通过基于短信发往的所属本地网方向、频次及流量的垃圾短信大数据相关性分析,解决了这一难题,供各电信运营商参考。

1.前言

根据相关资料显示,仅有0.7%以下的用户表示没有收到过垃圾短信,用户每周平均收到的垃圾短信数量为12 条。此外,电信运营商每月退网用户中垃圾短信用户占近一半,并造成大量欠费,尤其是后付费用户漫游异地后,其话单记录需要过一定时间后,方能向其归属地发回账单,造成欠费!因此,依法治理垃圾短信,是促进社会主义政治文明及精神文明建设、构建和谐社会、净化社会环境、打击违法犯罪的必然需要,是保障人民群众合法权益的根本使然。

垃圾短信诈骗和传播违法短信等活动日益猖獗,主要表现如下:

假冒银行或银联名义发送手机违法短信进行诈骗或者敲诈勒索公私财物;
散布淫秽、色情、赌博、暴力、凶杀、恐怖内容或者教唆犯罪、传授犯罪方法;
非法销售枪支、弹药、爆炸物、走私车、毒品、迷魂药、淫秽物品、假钞、假发票或者明知是犯罪所得赃物;
发布假中奖、假婚介、假招聘,或者引诱、介绍他人卖淫嫖娼的;
多次发送干扰他人正常生活的,以及含有其他违反宪法、法律、行政法规禁止性规定的内容;
极少数境内外敌对势力、敌对分子和对社会心怀不满的人,编造、传播一些明显带有诽谤、煽动性内容的手机违法短信,企图破坏社会稳定。


2.建议的技术方案

2.1以前垃圾短信防范系统存在的缺点:

仅通过对短信关键字进行匹配识别拦截;
仅对某一时段超频发送短信的用户进行识别拦截。
以上方式,易造成对正常用户的误判,且对垃圾短信的识别量非常有限。

2.2 实施的组网及处理流程

为在公众通信网上,提高垃圾短信判别的准确率,大幅减少垃圾短信的传送,使经济诈骗、垃圾广告、不法短信传播得到及时的甄别堵截。

3.实施的主要步骤

在此,我们首先定义“可疑短信接收方向”,它是指:在某一时间段内,某A地之某一电信运营商发往其他异地本地网(Bn地)短信数量X,若大于或接近其发往所在地(A地)的本地网短信数量Y,则该异地本地网(Bn地)称为“可疑短信接收方向”,“可疑短信接收方向”(Bn地)可能同时存在不止一个,即n>=1。比如:假设南昌联通(A)发往长沙(B1)、海口(B2)、东莞(B3)所有三个运营商(联通、电信及移动)的短信数量,若大于或接近其发往南昌本地三个运营商(联通电信移动)的短信数量,则长沙、海口、东莞称为“可疑短信接收方向”。

“可疑短信号码”:是指可疑短信接收方向的所有发信号码中,剔除电信运营商设定的白名单号码和吉祥号码后的发信号码。

具体来说:参照图1所示的可疑短信判别系统组网图,按照图2所示的判断可疑垃圾短信的流程,除重大节日:如春节、元宵、端午、中秋、国庆、元旦、五一、圣诞平安、情人节、父亲节、母亲节等外,垃圾短信分析判别服务器的短信话单采集模块,从短信中心采集短信话单,统计分析及判别模块分析某一个或多个时间段内超频发信号码的可疑短信接收方向及其可疑短信号码,对可疑垃圾短信方向发信号码的关联情况进行统计分析,再从计费帐务系统中提取该部分发信号码的用户信息资料进行鉴别,将判定为垃圾短信的号码列为黑名单,放入短信中心限制其短信发送,具体步骤如下:

步骤1,短信话单采集模块通过FTP从短信中心实时获得原始话单数据,对某一或多个时间段内(如每日8:00-12:00、13:00-17:00、19:00-23:00或按天等等)发信号码的超频短信话单(如在设定的某个时间段内超频发送100条以上短信,其他时间段超频发送短信数可以设定为150条等)进行分拣;

步骤2,可疑垃圾短信统计分析及判别模块,按本地网归属手机H码或小灵通长途区号统计短信接收数,将短信接收数大于或接近(如:50%以上)发信号码所在本地网的异地本地网(城市)列为可疑短信接收方向,在可疑短信接收方向的发信号码库中,剔除电信运营商设定的白名单号码和吉祥号码后,剩余部分列为可疑短信号码;

步骤3,分析可疑短信号码在所有可疑短信方向的短信发送数占该号码短信发送总数之比的数值,如该数值大于50%(如表2),则继续步骤4,否则返回到步骤1;

步骤4,从计费营帐系统中,调取该部分可疑短信号码的用户信息资料,进行鉴别,若同时所有设定条件:信用度为0、近期入网(如当月入网)、入网后极少接收短信(如接收短信少于三条)、且极少通话记录(剔除电信运营商免费客户号码通话记录后,通话记录少于三条),则将可疑短信号码定义为可疑垃圾短信号码,并继续往下,否则返回到步骤1;

步骤5,将可疑垃圾短信号码,列为黑名单,放入短信中心,在一定时间内(如七天或三个月等,根据具体规定设定),限制其短信发送,返回到步骤1。

鉴于部分垃圾短信发送方式越来越隐蔽和狡猾,对于实施以上规则后,仍没有截停的垃圾短信号码,可按照以下规则,予以二次过滤,提高拦截效果:

统计用户入网时间至6个月,以捕捉部分开卡时间和开始使用时间差较长的准预付费的“养卡”号码。
增加总量控制,加长统计时间,按如按某4个小时、6小时等区段统计,其累计发送总数量≥电信运营商设定的超频数量,如200条、300条、500条等,按上述步骤3判断分析。
个别真实的正常新入网用户,在入网后,会以短信方式告知亲朋好友,有可能被识别为垃圾短信用户,可采取对个别已错列黑名单的用户结合营帐系统中取得的通话、流量等正常使用行为情况进行复核,一旦出现正常通话和流量,则将该号码立即从黑名单中剔除。
电信运营商,应将垃圾短信黑名单用户拦截记录,提供给客服,便于投诉处理时的查询和解释。
通过以上二次过滤,再次提高垃圾短信的拦截质量和效率,有效率达到99%以上,目前拦截效果很好。

4.结束语

基于发送方向、频次流量的垃圾短信大数据相关性分析,通过采集某一个或多个时间段内超频发信号码的可疑短信接收方向、可疑短信号码,对可疑垃圾短信方向发信号码的关联情况进行统计分析,再从计费帐务系统中提取该部分发信号码的用户信息资料进行鉴别,将判定为垃圾短信的号码列为黑名单,放入短信中心限制其短信发送。该方法极大地提高垃圾短信判别的准确率,大幅减少垃圾短信的传送,使经济诈骗、垃圾广告、不法短信传播得到及时的甄别堵截。

作者简介:秦保根,男,1985年毕业于南京邮电学院电信工程系,高级工程师,享受国务院特殊津贴,中国联通科技成果评审专家、结算专家、评标专家,江西联通高级经理。

 

1作者:秦保根 来源:C114 编辑:顾北

 

声明:①凡本网注明“来源:通信界”的内容,版权均属于通信界,未经允许禁止转载、摘编,违者必究。经授权可转载,须保持转载文章、图像、音视频的完整性,并完整标注作者信息并注明“来源:通信界”。②凡本网注明“来源:XXX(非通信界)”的内容,均转载自其它媒体,转载目的在于传递更多行业信息,仅代表作者本人观点,与本网无关。本网对文中陈述、观点判断保持中立,不对所包含内容的准确性、可靠性或完整性提供任何明示或暗示的保证。请读者仅作参考,并请自行承担全部责任。③如因内容涉及版权和其它问题,请自发布之日起30日内与本网联系,我们将在第一时间删除内容。 
热点动态
普通新闻 中信科智联亮相2023中国移动全球合作伙伴大会
普通新闻 全球首个基于Data Channel的新通话商用网络呼叫成功拨通
普通新闻 中国联通:以优质通信服务 助力“一带一路”共建繁华
普通新闻 杨杰:未来五年,智算规模复合增长率将超过50%
普通新闻 长沙电信大楼火灾调查报告发布:系未熄灭烟头引燃,20余人被问责
普通新闻 邬贺铨:生态短板掣肘5G潜能发挥,AI有望成“破局之剑”
普通新闻 工信部:加大对民营企业参与移动通信转售等业务和服务创新的支持力
普通新闻 摩尔线程亮相2023中国移动全球合作伙伴大会,全功能GPU加速云电脑体
普通新闻 看齐微软!谷歌表示将保护用户免受人工智能版权诉讼
普通新闻 联想王传东:AI能力已成为推动产业升级和生产力跃迁的利刃
普通新闻 APUS李涛:中国的AI应用 只能生长在中国的大模型之上
普通新闻 外媒:在电池竞赛中,中国如何将世界远远甩在后面
普通新闻 三星电子预计其盈利能力将再次下降
普通新闻 报告称华为5G专利全球第1 苹果排名第12
普通新闻 党中央、国务院批准,工信部职责、机构、编制调整
普通新闻 荣耀Magic Vs2系列正式发布,刷新横向大内折手机轻薄纪录
普通新闻 GSMA首席技术官:全球连接数超15亿,5G推动全行业数字化转型
普通新闻 北京联通完成全球首个F5G-A“单纤百T”现网验证,助力北京迈向万兆
普通新闻 中科曙光亮相2023中国移动全球合作伙伴大会
普通新闻 最高补贴500万元!哈尔滨市制定工业互联网专项资金使用细则
通信视界
邬贺铨:移动通信开启5G-A新周期,云网融合/算
普通对话 中兴通讯徐子阳:强基慧智,共建数智热带雨
普通对话 邬贺铨:移动通信开启5G-A新周期,云网融合
普通对话 华为轮值董事长胡厚崑:我们正努力将5G-A带
普通对话 高通中国区董事长孟樸:5G与AI结合,助力提
普通对话 雷军发布小米年度演讲:坚持做高端,拥抱大
普通对话 闻库:算网融合正值挑战与机遇并存的关键阶
普通对话 工信部副部长张云明:我国算力总规模已居世
普通对话 邬贺铨:我国互联网平台企业发展的新一轮机
普通对话 张志成:继续加强海外知识产权保护工作 为助
普通对话 吴春波:华为如何突破美国6次打压的逆境?
通信前瞻
亨通光电实践数字化工厂,“5G+光纤”助力新一
普通对话 亨通光电实践数字化工厂,“5G+光纤”助力新
普通对话 中科院钱德沛:计算与网络基础设施的全面部
普通对话 工信部赵志国:我国算力总规模居全球第二 保
普通对话 邬贺铨院士解读ChatGPT等数字技术热点
普通对话 我国北方海区运用北斗三号短报文通信服务开
普通对话 华为云Stack智能进化,三大举措赋能政企深度
普通对话 孟晚舟:“三大聚力”迎接数字化、智能化、
普通对话 物联网设备在智能工作场所技术中的作用
普通对话 软银研发出以无人机探测灾害被埋者手机信号
普通对话 AI材料可自我学习并形成“肌肉记忆”
普通对话 北斗三号卫星低能离子能谱仪载荷研制成功
普通对话 为什么Wi-Fi6将成为未来物联网的关键?
普通对话 马斯克出现在推特总部 收购应该没有悬念了
普通对话 台积电澄清:未强迫员工休假或有任何无薪假
普通对话 新一代载人运载火箭发动机研制获重大突破
推荐阅读
Copyright @ Cntxj.Net All Right Reserved 通信界 版权所有
未经书面许可,禁止转载、摘编、复制、镜像