巨頭加持，詳解國內首個廣告反作弊大數據實驗室！

隨著越來越多的廣告預算流向數字渠道，廣告作弊也成為一門水漲船高的大生意。

2016年，AdMaster旗下第三方廣告監測產品 TrackMaster的反作弊模塊 BlueAir偵查到國內的無效營銷流量高達30.2%。美國國家廣告協會的數據也顯示，2016年整個廣告業因作弊蒙受的損失在500億人民幣左右，其中，受廣告主熱捧的程序化視頻廣告成為重災區，異常流量佔比高出平均水平73%。

而在第三方監測平台和行業協會公布數據的同時，大量的刷量工具也大行其道、層出不窮、作弊手法連環升級，「反偵察」能力極強。一個叫XX寶的「專業刷量平台」竟公開號稱自己產生流量的IP來自全國各地，是非常真實的數據流量並且天然支持國內主流數據統計器的流量統計。

而隨便在網上搜「刷量」的關鍵詞，立馬就會跳出各種賺錢工具。在某寶上搜「刷量點擊」，各大視頻網站的點擊、閱讀評論、冬粉點贊「有償服務」也是應有盡有。

不誇張的說，國內的廣告作弊已經擁有了完整模擬產業鏈及廣闊市場，絕非模擬器刷量時期一抓就現行的小打小鬧了。或者換句話說，如今國內的反作弊局面更為嚴峻了，單靠第三方監測平台來撒網捕魚，漏網的比例肯定會比聯合追捕要高。

這樣背景之下，4月末，國內領先的營銷數據技術公司AdMaster宣布與騰訊MIG（移動互聯網事業部）達成戰略合作，正式啟動廣告反欺詐大數據實驗室。AdMaster反作弊團隊將同騰訊MIG的燈塔團隊協同升級移動廣告的異常流量識別與防禦能力，為廣告主構建更全面、精準的反作弊防護網。

廣告反欺詐大數據實驗室成立啟動儀式現場，AdMaster & 騰訊負責人一起按下手印，寓意攜手共建健康的互聯網環境

MIG燈塔：技術與數據雙劍合璧的反作弊產品

騰訊MIG聯合AdMaster反作弊，可以說是強強聯合。AdMaster作為獨立的第三方監測公司，一直致力於通過數據技術甄別虛假流量，最大化保障廣告主的權益。而騰訊作為互聯網巨頭，既是廣告主也是廣告平台，它每年在花費十幾個億推廣App的同時還承載著幾百億的廣告預算，對凈化互聯網環境有很強的需求與責任。不過作為媒體，騰訊適合承擔反作弊的角色嗎？

答案是——適合。因為從歸因的角度來分析，我們很難去判別到底是廣告投放的哪個環節出現了作弊。例如一個視頻貼片，在它的產業鏈上有劇目發行方、評論者、廣告代理、銷售等多個主體，AdMaster 首席產品官鄔劍在發布會上現場指出：「即使某個流量是惡意的作弊流量，也無法準確的定性它是視頻網站還是廣告銷售在作弊，甚至內容發行商以及明星冬粉會為了播放量也可能作弊。作弊的歸因是非常複雜的，不能簡單的說作弊嚴重就都是媒體的責任。」

因此，從現實來看，把作弊動機簡單的拋給媒體的想法太過簡單，因為像騰訊這樣具備媒體屬性的平台也具有很強的反作弊動機，就像政府既有貪腐份子也有紀檢委和反貪局一樣。像BAT以及眾多有可持續經營理念的公司來說，都有單獨的反作弊部門，這就如同所有的上市公司都擁有內審部門一樣。

燈塔作為騰訊內部的數據產品，反作弊是它的一個應用方向，它的核心成員均具有多年的安全產品研發經驗。在與AdMaster合作之前，燈塔反作弊服務的客戶大部分是包括騰訊42款應用、應用寶廣告線以及騰訊社交廣告這樣的內部產品。它反作弊的初衷主要出於兩種考慮，一是騰訊作為廣告主受流量作弊之害，需要強有力的反作弊產品保護自身推廣預算；二是騰訊作為承載百億廣告預算的大平台，有義務保護廣告主的利益。目前燈塔反作弊每天驗證5億+移動終端，識別虛假終端，以保護內外部廣告主的推廣利益。

作為騰訊旗下的反作弊產品，燈塔最大的優勢在於覆蓋全國9億的月活終端，它幾乎覆蓋裝有騰訊應用的每一台手機，並擁有最準的IP庫和最全終端機型庫；依託海量數據，燈塔構建了終端指紋技術，結合雲端機器學習模型，多產品多場景的用戶行為交叉驗證，層層篩查進而識別大多數的程序化廣告作弊。而此次之所以選擇與AdMaster合作，就是想在日益嚴峻的作弊環境下通過開放自身的反作弊能力來與專業的反作弊夥伴一起凈化行業環境。

合作模式：類似聯合「取證」，目的是讓作弊流量無處遁形

從第三方孤軍奮戰到互聯網巨頭主動輸出反作弊能力，加入反作弊陣營，這絕對是能納入數字廣告反作弊史的大事件。而雙方的合作模式簡單用一句話來概括，多少有些類似現實中公檢法機關的聯合執法。

你一定前段時間熱播的《人民的名義》里如下片段不陌生：

為了還侯亮平清白，省檢察院需要趕在祁同偉掌控的省公安廳之前找到音信全無的尤會計和錢司機，一籌莫展之際，陸亦可退休的母親吳法官憑藉多年的斷案經驗，推測倆人可能被苑南縣法院司法拘留。為在祁同偉之前找到並審問倆人，吳法官當即向苑南法院說明情況，在苑南縣法院和漢東省檢察院的跨省聯合行動下，尤會計和錢司機最終得以在檢察院受審，侯亮平也才能繼續他的「利劍行動」。

而做一個形象卻不太恰當的類比，聯合成立廣告反作弊大數據實驗室的AdMaster和騰訊MIG燈塔團隊就相當於《人民的名義》中的漢東省檢察院及苑南縣法院，作弊流量多少類似劇中的尤會計和錢司機，而利益驅動的作弊方則等同於貪腐份子祁同偉一眾人等。

用燈塔負責人左肖的話來說，作為騰訊內部的反作弊部門，燈塔之所以選擇開放自己的能力與外界合作主要是出於對現狀的反思。從反作弊方來看，有個日益嚴重的問題就是作弊方技術日益高超，而反作弊方間的協同卻較少。「反作弊判定一個用戶是真的、假的、黑的、白的，這是盲人摸象的問題，AdMaster摸到一條腿，我們摸的是鼻子，也有人摸的是頭，拼裝起來之後才可以去判別這個用戶到底是黑的還是白的。」

據AdMaster和燈塔主要負責人介紹，針對反作弊，雙方的合作模式大致將分為三個階段。初期的合作模式是流量先過AdMaster反作弊模塊Blueair的多層濾網，之後再過一遍MIG燈塔的反作弊模型，經過雙方對流量的獨立判別，輸出匯總後的作弊流量，雙重防護，立竿見影的讓廣告主看到聯合反作弊的效果；第二個階段，雙方將在數據層面做深入研討，研發新的反作弊模型；第三個階段，雙方將在廣告反作弊之外的其他領域展開合作，比如廣義上的金融反作弊以及狹義上的營銷活動反作弊。

反作弊技術機制：各具優勢，雙重防護，提升作弊成本

AdMaster和騰訊燈塔之所以選擇在合作的第一個階段獨立判別、匯總輸出、雙重防護的模式，主要原因在於雙方在反作弊方面的經驗積累不同、技術優勢、反作弊模型也不盡相同。

AdMaster和騰訊燈塔的反作弊技術原理分別為何呢？

針對機器人虛假流量、內容投偏、多次激活和設備刷量等作弊行為，AdMaster構建了包括異常流量甄別、內容監測及移動App推廣監測在內的反作弊體系。異常流量甄別針對任何投放，支持后驗或者前期預判，內容檢監測針對定劇目的投放，通過截屏來監測，移動App推廣監測適用於移動App的CPI或者CPA投放。

為此，AdMaster旗下 TrackMaster先後研發了數字廣告及OTT廣告流量反欺詐技術BlueAir、視頻廣告反欺詐定投識別VOA、監播實錄SNAP等落地化的產品。這其中程序化的異常流量監測主要靠BlueAir完成。

BlueAir的運作原理有些類似空氣凈化器，共分4層來凈化IP、Cookie、IMEI/IDFA（終唯一識別碼）、Ref（關鍵詞）、UA（用戶代理）。四層過濾網刷掉的作弊流量難度逐層提升，依次為頻次異常（即同一IP/DEVICE ID/cookie重複點擊等）、來源異常（訪問者信息不符合常規等）、行為異常（曝光時間和地域異常等）和不穩定用戶（同一設備的生存周期過短等）。通過四層防護，BlueAir能過濾掉絕大多數的異常流量。

騰訊燈塔的反作弊原理則與AdMaster明顯不同。據燈塔負責人左肖介紹，目前的作弊手段可模擬偽造出正常用戶行為，傳統通過行為判斷的反作弊策略極易失效。騰訊燈塔深入終端底層技術，從系統層、應用層特徵構建模型判斷移動終端是否是作弊終端，同時依託自身大數據優勢進行多產品多場景的用戶行為相似性行為檢測，精準判斷異常用戶。燈塔反作弊方案主要依賴兩點，一個是規則引擎與機器學習雙引擎，第二個是數據。

在規則方面,嵌入燈塔SDK，從系統層、應用層構建規則，判斷是否模擬器、是否真機篡改ID偽造用戶，是否被作弊後台雲控等。舉個容易理解的例子，燈塔可以通過判斷同一來源終端的電量數據來識別作弊，因為作弊時設備的電量一般不會降。在機器學習方面，燈塔近兩年投入比較大，規則引擎針對確定性的作弊手段，而機器學習演算法通過燈塔大數據及可疑用戶，實現模型自學習升級，及早發現、識別新作弊手段，這主要是規避規則遺漏的作弊場景，通過機器學習來歸納出通過規則沒有辦法覆蓋的場景。

數據方面，騰訊在數據方面的優勢給反作弊帶來了先天優勢。燈塔覆蓋9億月活終端、全面的IP庫、終端機型庫，同時業務多樣、場景豐富，構建了全面、豐富的異常行為特徵庫，並累積了上億黑終端庫，燈塔在做反作弊時會建立訓練庫和評估庫，判別行為是否異常。另外，由於騰訊的App基本覆蓋不同用戶的不同使用場景，當不確定該設備是否作弊時，燈塔還可以做交叉驗證分析。

因此，基於AdMaster和MIG燈塔不同的反作弊模型及經驗積累，雙方將對作弊流量進行雙重校驗，聯合起來發現更多的作弊手段。在模型層，在獨立對作弊進行評判后，將數據融合統一輸出反作弊結果，使得反作弊的結果更加全面、準確，也讓作弊方的作弊成本不斷提升，減少它作弊的動機。

畢竟做生意都是要考慮ROI的。