通信人家园

标题: [原创]遏制垃圾短信关键在于源头治理 [查看完整版帖子] [打印本页]

时间: 2012-3-28 23:34

作者: gechangwei 标题: [原创]遏制垃圾短信关键在于源头治理

=================================================
该帖于3月29日8:40被推荐至首页焦点话题（家园副管01）
=================================================

垃圾短信治理是个系统工程，既要堵，也要疏；既需要掌权者立法明确规则，也需要相关方坚定执行；既需要权力部门对始作俑者秋后算账，也需要运营商进行中途拦截和源头治理。

如今，运营商在中途拦截方面做了不少工作，可惜收效甚微；要有效遏制垃圾短信，关键还是要做好源头治理。这方面，运营商还有许多工作要做。

一、垃圾短信拦截现状

早在N多年前，移动就已经根据工信部的要求，在短信网关上部署了垃圾短信拦截系统。用户发出的短信，目前至少需要经过两道“审批”： 1、垃圾短信过滤平台，运营商自身的设备 2、国家某部门的过滤设备。目前短信拦截的原理主要两个：1、按照敏感关键字；2、按照频次和流量监控。从原理可知，短信拦截必有漏网之鱼：1、关键字敏感词不能全部覆盖； 2、流量监控必须达到一定频次才能拦截。为了减少拦截系统的误伤，短信拦截并不全靠系统，还有很多人工工作。目前，仅浙江移动这边每天都有十多名客服员工负责处理垃圾短信拦截系统推送过来的、系统难以完全判定、需要人工二次审核的短信。对于确认是垃圾短信的，她们会对发送方做限制发送处理。不过，垃圾短信这东西，就算放在你面前，你也未必能判断。人都未必做好的事情，更何况是系统。所以，漏过的，误判的情况都会有，带来不少投诉，有些还打起了官司。误判的情形有：有些人怎么发，对方都收不到；有些人短时间内发了较多短信，结果被暂停短信功能。道高一尺、魔高一丈。
垃圾短信拦截实质是让系统跟人比智慧。这个系统也就能拦拦业余的群发者。对于专业的垃圾短信群发商，只要稍微花点时间做些试验，就能迅速摸透拦截系统的规则，从而绕过拦截系统。

所以，对于中途拦截的效果，我并不看好。

二、垃圾短信治理的关键：做好端口和号码的源头管理

垃圾邮件之所以难治理，是因为邮件服务提供商无数，且分布在世界各地。垃圾短信治理在这方面简单了很多，因为源头都控制在三家运营商手中。

垃圾短信的发送方式无非两种：端口发送和点对点发送，前者需要接入运营商的管理平台，后者需要从运营商这里购卡。前者治理要比后者容易。

稍微再细分一下，垃圾短信的源头可分成四类：SP端口发送、行业端口发送、网内点对点和网间点对点。

对于这四种情况，我以前都研究和打击过。根据以往经验，我分别建议如下：

1、SP端口发送：取消或限制向第三方点播的业务

最初，每个SP都可以通过免费代码向用户群发短信，导致群发泛滥。这种情况在2004年达到顶峰，而到在2005年，三家运营商逐渐都取消了SP的免费代码，使得SP群发基本消失。

不过，目前还有极个别的SP理论上还有群发的可能，因为这些SP申请过一些A点播信息发给B的业务，这种代码可被用作垃圾短信群发。

所以，对于此类业务，我建议要么对单个号码的第三方点播总次数做一个限制，系统做不到或代价太大的话最好彻底停止此类业务。

2、行业端口发送：采取SP一样的订购和管理方式

最近，工信部下发了《关于组织开展端口类短信群发业务清理整顿专项行动的通知》，其中规定：“对利用自有端口、行业端口开展短信群发业务的进行白名单管理，对群发短信的内容进行严格审查，要求合作单位必须经用户确认后方可利用其端口发送短信”。这个规定很不错，几年之前我在博文里就这样建议过。不过，我担心的是，仅靠运营商内部管理，这个规定恐怕难以落到实处。因为如今运营商内部的绩效考核文化深入骨髓，靠大家自觉执行对自己绩效有负面影响的管理规定，迟早会流于形式或搁置一边。在往年整治SP违规的实践中，我总结出一点：系统远比人来得可靠。

SP违规后来之所以能够得到显著遏制，靠的就是系统强制执行的一些业务规则，而不是靠所谓加强管理。对于行业端口短信，我强烈建议跟SP一样实施管理。我认为，行业端口短信和SP业务的唯一区别，就是一个免费一个收费，其他方面完全可以一样，包括应用同样的管理平台。我认为，应该要求端口短信和SP短信一样，都实施订购确认。另外建议也实施0000查询和00000退订，用技术的手段来保证规定的真正落实，将收不收端口短信的控制权真正交到客户手中。

3、网内点对点：应用发送对象个数来鉴别群发号码

点对点垃圾短信的打击一直是个难点，关键字过滤方很容易被博大精深的汉字文化给旁路，而按照流量来进行控制也很容易靠轮换号码来规避。如何区分垃圾短信、拜年短信和行业短信？因为它们可能都会在短时间内发送大量短信，所以仅仅靠流量判断会导致误伤。其实，判断不难：1、垃圾短信用户会向大量不同对端发送短信，无通话行为。2、拜年短信用户不会只发短信，往往过去或者当月有通话行为；3、行业短信往往只向特定端口发送。所以，点对点群发号码还是有显著特征的，借助分析模型，是很容易识别出来的，比如找出向大量不同的对端发送短信，但却无通话、上网等个人通信行为的号码。这个模型，可以很简单，也可以做到很细致。做得越细，那么准确率越高，误伤的可能性越低。几年前，我就用这个办法找出垃圾短信群发号码，然后让相关人员对群发号码进行停机处理，取得很好的效果，且基本没有投诉。具体方法细节参见我当年写的博文：《号码离散度分析法在打击点对点群发中的应用》
4、网间点对点：要么闭环管理要么允许黑名单拦截

网间点对点的分析方法跟网内点对点类似，同样也可以借助网间话务量来识别出正常用户的群发，以减少误伤。

网间点对点难在处理上。

对于发现的嫌疑网间短信群发，要么建立起一个闭环的网间垃圾短信号码处理系统，由主管部门监督和考核；要么由工信部授权各地运营商可以自主对发现的嫌疑号码纳入黑名单，进行彻底拦截处理。

三、小结

垃圾短信治理的关键在于控制好源头，也就是控制好端口和用户号码。

通过系统来保证规则的执行，远比通过管理来保证规定的落实更为可靠。借助SP一样的管理方式，行业端口短信群发可以得到有效规范；借助群发号码识别模型，可以准确识别出短信群发号码，从而为后续自动化处理提供依据。

总之，垃圾短信治理，技术不是万能的，但没有技术手段也是万万不能的。

[ 本帖最后由 gechangwei 于 2012-3-29 11:16 编辑 ]

时间: 2012-3-29 09:53

作者: 放火

何为垃圾短信！！！

我觉得XXTV和广电就是装孙子
干翻分众是因为广告，剑指电信不是为了宽带资源才怪，而且不排除挤兑IPTV的报复嫌疑。

时间: 2012-3-29 09:59

作者: vane999

利益纷争

时间: 2012-3-29 10:46

作者: wqianli

以前做过垃圾短信系统，的确是楼主所说的这些情况，而且运营商在合理运营和市场之间的取舍是关键

时间: 2012-3-29 10:54

作者: 有名导演

要是治理了，SP商又得开发新的技术了，到头来就不知道他们怎么使黑招了

时间: 2012-3-29 11:17

作者: gechangwei 标题: 回复 2# 的帖子

扪心自问：自己真的没有一点问题？

时间: 2012-3-29 11:18

作者: gechangwei 标题: 回复 5# 的帖子

SP早已不是群发的主力，如今都是一些群发公司在搞

时间: 2012-3-29 14:49

作者: 13901390139

这是一个朋友三四天内收到的，是个吉祥号，牛吧！运营商还好意思讲嘛/

广告：
13042464961
15008417401
13530580443
10658139
13042456238
18010179804
18911913203
13105028427
13803165215
13515136591
13968312696
15221625644
18221124489
02281203619
18657182974
15658563305
13211625483
13811712665
15887574576
13136436493
13074565593
13263580888
13199099090
18735230495
18253723289
075585599625
15362702209
075585088004
13824364454
15118994195
15899873286
15989464457
15522754790
075585500023
15574554550
13303714906
13114862975
13803666420
02482965454
15604455549
13693070896
057185399715
13159602926
15118661231
18328466870
15378760416
13287077947
18367439236
07503545013
18758304267
18781826801
18320022636
13858346602
15538192366
13208258288
15522660454
13213368740

发票：
13146601510
15311249059
18284243226
15526216527
13027372465
15616755147
13217401473
13017337182
18628169041
15184474533
13825300812
13195125336
13845740999
13003421527
18728005094
18735230495
13958373261
18843595538
13943822969
15258325452
15137661350
18309638629
13824007007 这个号天天不断
13645843393
13412131836
15311241369
18702822249
18683996378
13219852062
13260812375
13089471206
15990551703
057185399715
13962422844

10690067116022交易宝
10690999126103酷盘
95555招行
10690116621000069东旺7车网
1069011662东旺7车网同上
106900291919烟酒在线
106575000049小米
95568民生
106571611460890000宁波骏新
1065755802561199恒波公司
1069019559706666珍品网
1065712038070678562广汇汽车
1065755574930000旅游
10690091288378快信
106575326215109牵手之旅
10690116621000069商城
106981630163网易
106575000410685771网游
106900292276完美世界
95510平安
106901950676百度
106575000511信达财险  非常多
1065752190888191展会
1065755574930000旅游
10690999126906爱日租
106575552670241梦芭莎广告    连发几十遍
1069003602126618打折
10690999365房产
1065712001184700腾付通
10657500022313826互创时代
106575000017千橡游戏
12306铁路
10657555747210001职称培训
106900291919烟酒在线
10690909869996阿里通
10690007307658爱肯
95550天平
10690116621000205豹团每天非常多
1065800615283805104起亚
95590大地保险
106575326319185024服装
10690036021307北京中兴恒业
10690067000618李宁
1069036020008服装打折
10657500955691新华保险
10657559956622携程
106575557686麦考林
1065750005971234拉卡拉
106901599599660000上海四浪
106909098699970001智明德
10657520903307苏州澳洲移民
106575000511信达保险
95588工行
1069002961957薇姿广告
10690116621000069西科姆
95533建行
10690091288378快信
106575009553商品             连发几十条
1065858662000电话会议

106575000418为为网
1065790099基金广告
10690029619541科颜氏广告
95588工行
1065755526620绿盒子童装
95529太平财险
106900291919烟酒在线
1065752190884515广联达
10657536882898766证券之星
1065752190880164481装修
106575580242联想
95500太保
10657520603168城市团购网
1065750002046买卖宝
10657552027101112763商品打折
106909092299391渠道大学商品广告
10690116288208股票广告
106571206095552永诚保险
95555招行  员工考勤申请
1065755230200121101我爱我家
106575321396科瑞特  招生广告
1069011662米其林
106575321372物美大卖场
10690036020100彩票
10658139014709615962
10657559956666广告
10600292458广告彩信
106575209033平安保险
106575000033指南针
9553990643830南航
1069011662酒仙网
1065753258123123必胜客宅急送
1069006016搜狐微博
10690029619561阿玛尼
1065750002046买卖宝
1069002961959羽西
106575557642牛博士
106579068800富国
106575321275网易
10690163网易
10086790882509
1065752086680628百货打折一天十多遍往里发
1069011662广告

10658139 很多天天有

10657500001032
1065755526625284100膜法世家旗舰
1065712036050066金马甲广告
1069011662广告
106901166299110546授课广告
106575539908益丰大药房
1065712036050246招生广告
106900360362广本车
1069011621362370内蒙人才网
1069015927
106575321361东风日产
1008659全球通VIP俱乐部广告
10690067000618李宁商城
106575523802112376广告
106900292345猪八戒网
955533建行
1065750005971234拉卡拉
91118人保车险
95522泰康人寿
1065790099海富通
106575296625
1065755202710168338百果园
106571611460890000宁波骏新
106575208880南京证券
106575020374我买网广告
1069011662000069东旺7车网
10658139
1069002961961奢妍美
106575000111阿里云  连发十多遍
106575000049小米
106575000287卖吧
1065753213081002阿里巴巴
10690999126187蝌蚪通行证
106575538888快乐购
106901162136237珠江人才网
1065716106193900000台州修车
1065750075603601去哪网
106575010037哥们网
106575550218基金
1065752000121188凤凰藏品
106575000434假日游戏
95533建行
106575296625授课广告
1069011662东旺7车网
1065800615117034690房产广告
106571610136640000服装打折
1069070075腾讯
10690822016088特惠王
106571611460890000宁波骏新
10690091288378快信
95533建行       屏蔽屏蔽！

18244233314卖药
13391949811房产
13405147078授课
15510902240股票内幕
15313897617房产
15176898250发票
15666721695发票
057181757611开心淘商城
15629921574东风日产
14743915469  软件广告
15342186326房产
075585574314广本
13087367910代开发票
13097159785发票
18622052894税据
18622052894发票
13015154962帮你窃听通话
13297332799  中奖
02224525714基金信托广告
18255639641广告
15593750094贷款广告
15542643497北京暖通卫浴展广告
13120721694房产广告
15823522566医药
13132268280发票
13125271074房产
14714661283地板
13824007007广告
13271283024家电
15522439880发票
15823522566广告
15589300204广告
18383945228广告
13231170749广告
13043545696广告
13212096690广告
15537669064广告
13271281386广告
18260285267广告
18713567654广告
13579908366广告
18286266886广告
18662026606广告
13082501523广告
13280306814诈骗
13236904270授课
13236914303授课广告
15599268525广告
13277333844广告
18701344426广告
15620219884发票
13954666124房产
13405467117
18686117636诈骗
18794730149发票
13132061441房产
13547116574诈骗
13007369600发票
13087361856发票
15199024213发票
18383069317广告
15247223114发票
18393456904发票
15882145741发票
13824007007广告天天重复老发
02285344183房产
07592451827广告
13547116574诈骗
18369434944诈骗
13599492441诈骗
13376413986医考
13484215419发票
15067400540发票
15067401242发票
13547116574诈骗
02224314464房产
15058899480发票
15616652713发票
13017252955卖烟
13738459052迷信
13407980447发票
13297028734房产
15322329362股票内幕

时间: 2012-3-29 14:52

作者: 13901390139

移动用户

时间: 2012-3-29 16:10

作者: gechangwei 标题: 回复 9# 的帖子

你想说明什么？说明垃圾短信还很多？

时间: 2012-3-29 18:29

作者: ananclan

每看必顶·~~~~~~~~~~！！

时间: 2012-3-30 15:04

作者: 东方蔚澄

难在法律上
没有法理基础，这些工作都是扯淡
而且违宪。

时间: 2012-3-31 08:59

作者: gangzisun

保护我们用户的合法权益，希望有关部门加紧政策制定，加大实施整治力度~~

时间: 2012-3-31 20:57

作者: alan_sally 标题: 一半一半

什么事都是同时产生的，就看你怎么看，怎么处理，角度不同，处理的程度不同，感知也会不同！

时间: 2012-4-2 19:14

作者: 7071 标题: 回复 8# 的帖子

牛

时间: 2012-4-3 09:59

作者: 刚果金

垃圾短信的事情,315之后忙了好一段时间,大概了解下情况,感想如下:
1.垃圾短信发送是刚需,已经形成了产业链,只要是不涉及政治和色情内容的,短期内是断不了的.
2.当前由于被广电讨伐,需要撇清运营商合伙的问题,所以电信式的端口发送是要被清理的,SIM卡是发送将成为未来经营方式的主流.
3.从端口方式改为卡式发送,会抬高发送短信的成本,对电信这样的小网,影响是比较大的.

以电信端口发送为例,一条短信SP收用户一毛,电信收SP5分4,移动结算收电信3分,SP基本是没有设备成本投入,这个价格还比较公道,如果改成卡式发送,SIM卡制作,设备采购,基站扩容都是新的成本,而用户一毛一条短信价格是不会抬升的(这个价格由移动大网控制).
4.从局部来看,电信移动用户和移动的移动用户比为1:10,电信和移动的垃圾短信发送比为4:6,经过315后可能调整为3:7.

[ 本帖最后由刚果金于 2012-4-3 10:07 编辑 ]

时间: 2012-4-3 10:14

作者: 东风知我心

楼主是专家！

时间: 2012-4-3 12:53

作者: 神鉴奇侠

置之不理

时间: 2012-4-3 19:05

作者: 逍遥牛 标题: 回复 1# 的帖子

hhhhhhhh

时间: 2012-4-5 20:59

作者: 灿灿 标题: 315垃圾短信谈

315曝光了运营商的垃圾短信，如何才能杜绝垃圾短信：1、政策管理
2、封短信端口
3、废除短信，推广IM

时间: 2012-4-14 11:02

作者: Ps茶犬

看楼主的文章，现在都还只是学习阶段，继续学习

通信人家园 (https://www.txrjy.com/)