面向運營商的垃圾短信過濾技術(shù)與系統(tǒng)研究

單擊此處編輯母版文本樣式,第二級,第三級,第四級,單擊此處編輯母版標(biāo)題樣式,LOGO,Page,*,本作品采用,知識共享署名,-,非商業(yè)性使用,2.5,中國大陸許可協(xié)議,進(jìn)行許可專業(yè)交流,模板超市,設(shè)計服務(wù),本作品的提供是以適用知識共享組織的公共許可（簡稱“,CCPL”,或“許可”）條款為前提的本作品受著作權(quán)法以及其他相關(guān)法律的保護(hù)對本作品的使用不得超越本許可授權(quán)的范圍如您行使本許可授予的使用本作品的權(quán)利，就表明您接受并同意遵守本許可的條款在您接受這些條款和規(guī)定的前提下，許可人授予您本許可所包括的權(quán)利查看全部,NordriDesign,中國專業(yè),PowerPoint,媒體設(shè)計與開發(fā),單擊此處編輯母版文本樣式,第二級,第三級,第四級,單擊此處編輯母版標(biāo)題樣式,面向運營商的垃圾短信過濾技術(shù)與系統(tǒng)研究,姓 名：曹 耀 輝,學(xué) 號：,2220100179,導(dǎo) 師：孫建偉,匯報提綱,背景介紹,運營,商現(xiàn)有系統(tǒng)介紹,垃圾短信集中管控系統(tǒng)方案,垃圾短信過濾經(jīng)營分析系統(tǒng)支撐方案,總結(jié)與展望,匯報提綱,背景介紹,運營,商現(xiàn)有系統(tǒng)介紹,垃圾短信集中管控系統(tǒng)方案,垃圾短信過濾經(jīng)營分析系統(tǒng)支撐方案,總結(jié)與展望,背景,隨著短信業(yè)務(wù)的發(fā)展，手機用戶受到越來越多垃圾短信的騷擾。

2011,年下半年手機短信息狀況調(diào)查報告顯示，用戶平均每周收到垃圾短信,11.4,條，收到垃圾短信息占全部短信息的比例為,22.6%,垃圾短信治理刻不容緩，治,理,好垃圾短信成為運營商提高通信服務(wù)質(zhì)量的關(guān)鍵,所在,垃圾短信產(chǎn)生的原因：,利益驅(qū)動，短信業(yè)務(wù),被發(fā)展,成了廉價的廣告平臺,立法,滯后，手機實名制沒有實際應(yīng)用,SP,行業(yè)缺乏自律，移動運營商對,SP,監(jiān)管不嚴(yán)格,運營商垃圾短信過濾系統(tǒng)和技術(shù)存在不足，需要根據(jù)需要進(jìn)一步研究與改造,垃圾短信的定義,根據(jù),一般垃圾短信的特征，認(rèn)為滿足以下兩個條件的短信為垃圾短信條件,1,：垃圾短信發(fā)送者和接收者之間不存在社會網(wǎng)絡(luò)的聯(lián)系，也就是說,垃圾短信,發(fā)送者和接收者之間不認(rèn)識條件,2,：內(nèi)容相同或相似的短信在短時間內(nèi)達(dá)到一定的發(fā)送數(shù)量,垃圾短,信分類,點對點垃圾短信，其發(fā)送號碼為手機號碼根據(jù)發(fā)送號碼與接收號碼是否屬于同一家運營商，還可詳細(xì)分為網(wǎng)內(nèi)點對點短信和網(wǎng)間點對點短信,；,網(wǎng)關(guān)垃圾短信，其發(fā)送號碼為網(wǎng)關(guān)接入號,垃圾短,信過濾方法,垃圾短信過濾方法,優(yōu)點,缺點,流量控制方法,能夠快速簡潔的識別出垃圾短信并對垃圾短信發(fā)送者實施關(guān)停操作,當(dāng)某用戶被判定為垃圾短信發(fā)送者時其已經(jīng)發(fā)送了大量的垃圾短信并造成嚴(yán)重的影響，而且這種方法容易對發(fā)送量大的非垃圾短信誤判，損害用戶的正常利益,關(guān)鍵字匹配方法,方法簡便；,關(guān)鍵詞庫易配置；,容易對正常短信造成誤判，因為有些正常短信中也可能含有關(guān)鍵詞庫中的關(guān)鍵字，僅僅依靠關(guān)鍵字可能就過濾掉這些短信；另一方面中文詞匯太多，而且某些關(guān)鍵字可以使用同音字代替，關(guān)鍵詞庫不完備，過濾效率比較低下,基于黑白名單的過濾方法,方法簡單,；,可人工添加，也可系統(tǒng)自動添加,便于運營商通過客戶屬性信息進(jìn)行控制；,黑白名單不完備，且垃圾短信發(fā)送者大部分為新開卡用戶,匯報提綱,背景介紹,運營,商現(xiàn)有系統(tǒng)介紹,垃圾短信集中管控系統(tǒng)方案,垃圾短信過濾經(jīng)營分析系統(tǒng)支撐方案,總結(jié)與展望,短信中心系統(tǒng)結(jié)構(gòu),經(jīng)營分析系統(tǒng)結(jié)構(gòu)與流程,現(xiàn)有垃圾短信監(jiān)控平臺,垃圾短信過濾流程,現(xiàn)有系統(tǒng)存在的問題與解決方法,序號,現(xiàn)有系統(tǒng)存在的問題,解決方法,1,現(xiàn)有系統(tǒng)為以省為單位進(jìn)行部屬，人工審核工作也是以省為單位進(jìn)行，各省都要消耗大量的人力資源來審核經(jīng)過過濾系統(tǒng)一次識別的疑似垃圾短信。

建立集中管控系統(tǒng)，進(jìn)行統(tǒng)一審核，并添加二次過濾規(guī)則,2,疑似垃圾短信數(shù)量龐大,，沒有審核優(yōu)先級順序，審核工作比較滯后,根據(jù)指定策略通過對疑似垃圾短信進(jìn)行分析，得到嫌疑度更高的疑似垃圾短信，送審后人工審核人員可優(yōu)先對這些高嫌疑度疑似垃圾短信進(jìn)行處理,3,現(xiàn)有系統(tǒng)策略單一，關(guān)鍵字容易被替代繞過，攔截效率低下,提出了策略集的新概念，方便系統(tǒng)對整個策略的管理，并在策略集的基礎(chǔ)上提出關(guān)鍵詞策略和流量策略的具體實施模型，在模型中新加入雙閥值控制的策略，可以更及時有效的對疑似垃圾短信做出相應(yīng)處理,4,全國各省的策略不統(tǒng)一，不能共享各省的黑白名單,發(fā)布全網(wǎng)統(tǒng)一策略，共享各省的黑白名單,5,中文語法復(fù)雜，關(guān)鍵字庫不完備,選取入網(wǎng)時長、品牌、主被叫時長、人均發(fā)送短信量、發(fā)送峰值等用戶屬性作為特征向量，建立了基于決策樹的垃圾短信過濾系統(tǒng)模型,匯報提綱,背景介紹,運營,商現(xiàn)有系統(tǒng)介紹,垃圾短信集中管控系統(tǒng)方案,垃圾短信過濾經(jīng)營分析系統(tǒng)支撐方案,總結(jié)與展望,垃圾短信集中管控系統(tǒng),系統(tǒng)處理流程,策略集定義,策略集屬性,關(guān)鍵詞策略,流量策略,二次過濾策略,二,次放行策略,優(yōu)質(zhì)客戶短信放行策略,短,信長度策略,白,關(guān)鍵字組合,不,含中文的短信,指定時間段內(nèi)同一用戶多次送審則僅審,第一次,二,次攔截策略,疑似垃圾短信如和被審核過的短信內(nèi)容相同，不進(jìn)行人工審核，直接參照上次審核結(jié)果,確定高嫌疑度的疑似垃圾短信優(yōu)先進(jìn)行人工審核,匯報提綱,背景介紹,運營,商現(xiàn)有系統(tǒng)介紹,垃圾短信集中管控系統(tǒng)方案,垃圾短信過濾經(jīng)營分析系統(tǒng)支撐方案,總結(jié)與展望,經(jīng)營分析系統(tǒng)垃圾短信治理應(yīng)用模塊功能,建模數(shù)據(jù)集,建模處理流程,訓(xùn)練集樣本,品牌變量,A,入網(wǎng)渠道變量,B,是否垃圾短信,U,神州行,營業(yè)廳,是,全球通,營業(yè)廳,是,全球通,代理商,是,動感地帶,營業(yè)廳,否,神州行,代理商,是,神州行,代理商,是,動感地帶,代理商,是,動感地帶,代理商,是,動感地帶,營業(yè)廳,否,全球通,代理商,否,神州行,營業(yè)廳,是,全球通,營業(yè)廳,否,全球通,代理商,否,動感地帶,營業(yè)廳,是,建模流程,計算輸出變量,的平均不確定性,。

計算,“品牌”變量,的信息熵和信息增益,建模流程,計算“入網(wǎng)渠道”變量,的信息熵和信息增益由于“品牌”變量,的信息增益值比“入網(wǎng)渠道”變量,的信息增益值大，以“品牌”作為根節(jié)點，“入網(wǎng)渠道”作為二層節(jié)點，構(gòu)建,決策樹,選取決定垃圾短信置信度高（通常可設(shè)為,80%,以上）的分支作為判定垃圾短信的規(guī)則分支，可得出最終的規(guī)則：,建模流程,匯報提綱,背景介紹,運營,商現(xiàn)有系統(tǒng)介紹,垃圾短信集中管控系統(tǒng)方案,垃圾短信過濾經(jīng)營分析系統(tǒng)支撐方案,總結(jié)與展望,總結(jié),從運營商方面對垃圾短信過濾技術(shù)和系統(tǒng)進(jìn)行了研究，所做研究都是基于移動通信網(wǎng)絡(luò)，是垃圾短信在網(wǎng)絡(luò)側(cè)的攔截，在實際應(yīng)用中，需要手機終端攔截與網(wǎng)絡(luò)側(cè)攔截相結(jié)合，才能對垃圾短信達(dá)到更好的治理效果謝謝！,。