（資料來源，媒介360，2015廣告主投放數(shù)據(jù)報(bào)告）

要實(shí)現(xiàn)精準(zhǔn)廣告營銷，通常需要借助DSP來進(jìn)行。由于DSP可大幅提升投放的精準(zhǔn)度，為廣告主提供跨媒介、跨平臺(tái)、跨終端的廣告投放平臺(tái)，通過數(shù)據(jù)整合、分析實(shí)現(xiàn)基于受眾的精準(zhǔn)投放，并且實(shí)時(shí)監(jiān)控不斷優(yōu)化，因此所有對(duì)廣告的真實(shí)效果有追求的行業(yè)都適合DSP。但隨著廣告主對(duì)精準(zhǔn)廣告的要求越來越高， 以及大數(shù)據(jù)技術(shù)對(duì)精準(zhǔn)廣告的巨大推動(dòng)作用，DSP平臺(tái)對(duì)實(shí)時(shí)數(shù)據(jù)處理效率的要求和對(duì)大數(shù)據(jù)技術(shù)的引入成為了當(dāng)務(wù)之急。因此，選擇合適的大數(shù)據(jù)處理平臺(tái)成為了精準(zhǔn)廣告營銷用戶面臨的難題。

來自DSP的業(yè)務(wù)挑戰(zhàn)

眾成就數(shù)字傳媒集團(tuán)是央視最大的廣告代理公司-三人行的母公司(以下簡(jiǎn)稱“眾成就”)，集團(tuán)下屬三人行、聞成就、在身邊三家子公司。業(yè)務(wù)覆蓋電視廣告、大內(nèi)容策劃、投資與代理、全媒體數(shù)字營銷以及大數(shù)據(jù)研究與移動(dòng)產(chǎn)品開發(fā)服務(wù)?；?9年積累的豐富廣告服務(wù)經(jīng)驗(yàn)，不斷延伸互聯(lián)網(wǎng)發(fā)展下數(shù)字營銷領(lǐng)域的觸角，致力于成為提供全媒體服務(wù)的綜合性傳媒集團(tuán)。

從2012年至今，眾成就文娛內(nèi)容合作已超過220個(gè)IP；從2015年開始，獨(dú)立投資打造《黃金線路》、《車神駕到》、《全家好拍檔》、《魅力廚房》等熱門IP，并以聯(lián)合投資、內(nèi)容代理等方式共同打造數(shù)十檔IP內(nèi)容；而伴隨著大數(shù)據(jù)時(shí)代的來臨，2015年啟動(dòng)以人為中心的IP文娛產(chǎn)業(yè)鏈布局，希望通過大數(shù)據(jù)分析產(chǎn)品開發(fā)，構(gòu)建精準(zhǔn)DSP平臺(tái)，打通線上與線下，鏈接用戶全媒體軌跡，獲取大內(nèi)容策劃與制作的內(nèi)容方向反哺與全平臺(tái)投放策略。眾成就DMP（數(shù)據(jù)管理平臺(tái)）提供數(shù)字廣告營銷從曝光到轉(zhuǎn)化全流程中集數(shù)據(jù)采集、存儲(chǔ)、分析的解決方案，對(duì)外提供統(tǒng)計(jì)結(jié)果的前端展示和報(bào)表輸出功能。眾成就DMP致力于幫助廣告主圍繞用戶受眾優(yōu)化媒體資源分配，輔助廣告投放創(chuàng)意和落地頁內(nèi)容制作，并使數(shù)字廣告投放策略實(shí)時(shí)調(diào)優(yōu)成為可能，從而提升最終的銷售轉(zhuǎn)化。通過積累廣告主歷史投放數(shù)據(jù)并提供深度的數(shù)據(jù)全景洞察，廣告公司和廣告主結(jié)成戰(zhàn)略伙伴關(guān)系。構(gòu)建眾成就的精準(zhǔn)DSP平臺(tái)，對(duì)數(shù)據(jù)的實(shí)時(shí)處理能力提出了很高的要求：

首先，眾成就DSP平臺(tái)由于具有接入用戶眾多，用戶數(shù)量級(jí)達(dá)到了十億量級(jí)，而頁面也達(dá)到了百萬量級(jí)，如此大規(guī)模的用戶和頁面處理對(duì)數(shù)據(jù)處理平臺(tái)的性能是一個(gè)巨大的考驗(yàn)。

其次，眾成就DSP平臺(tái)具有高并發(fā)的特性，在線投放系統(tǒng)每天需要處理百億次廣告交易，這對(duì)數(shù)據(jù)處理平臺(tái)的并發(fā)性能又提出了很高的要求。

最后，AD Exchange要求競(jìng)價(jià)在100ms內(nèi)完成，這就要求數(shù)據(jù)處理平臺(tái)具有低延時(shí)的特性，因此，網(wǎng)絡(luò)帶寬的質(zhì)量有較高的需求。

華為企業(yè)云應(yīng)對(duì)挑戰(zhàn)

為了找到滿足上述要求的數(shù)據(jù)處理解決方案，眾成就IT部門多方比較、仔細(xì)調(diào)研，最終選擇了華為企業(yè)云大數(shù)據(jù)解決方案搭建DSP的實(shí)時(shí)數(shù)據(jù)處理系統(tǒng)，該系統(tǒng)的架構(gòu)圖如下所示：

該系統(tǒng)主要包括前端投放集群和后端大數(shù)據(jù)計(jì)算集群兩部分，前端投放機(jī)業(yè)務(wù)集群使用物理機(jī)實(shí)現(xiàn)，后端計(jì)算集群部分使用彈性大數(shù)據(jù)服務(wù)(云服務(wù)器)，采用混合托管形式搭建。眾成就面向大數(shù)據(jù)后臺(tái)接入功能做了大量測(cè)試，屬于高級(jí)功能群的用戶，使用spark Client向大數(shù)據(jù)集群提交作業(yè)，后臺(tái)JDBC和Hbase client連接使用大數(shù)據(jù)。同時(shí)基于大數(shù)據(jù)+OBS的方案解決了客戶對(duì)于本地kafka和數(shù)據(jù)存儲(chǔ)的維護(hù)成本，壓力峰值滿足了眾成就的業(yè)務(wù)場(chǎng)景，最終獲得了眾成就的認(rèn)可。

該系統(tǒng)中，眾成就主要使用的業(yè)務(wù)包括hadoop client、spark client、hive+hbase，為此，華為企業(yè)云進(jìn)一步完善了功能驗(yàn)證、可擴(kuò)展性和用戶資料，同時(shí)通過測(cè)試以及個(gè)性化的定制方案滿足了客戶運(yùn)行態(tài)作業(yè)后臺(tái)監(jiān)控和多用戶使用場(chǎng)景功能需求，這些個(gè)性化的定制包括：

混合托管搭建：前端投放集群使用物理機(jī)，后端集群使用 大數(shù)據(jù)服務(wù)

使用多種大數(shù)據(jù)服務(wù)：hadoop 、spark 、hive+hbase

高質(zhì)量5線全動(dòng)態(tài)BGP網(wǎng)絡(luò)保障

除此之外，華為企業(yè)云大數(shù)據(jù)解決方案還具有以下特點(diǎn)：

一，海量存儲(chǔ)，功能豐富，管理簡(jiǎn)單

PB級(jí)存儲(chǔ)容量，云端無限擴(kuò)容；全面支持采集、存儲(chǔ)、分析、挖掘、深度學(xué)習(xí)；一站式可視化管理，簡(jiǎn)化部署及運(yùn)維。

二，高度兼容開源，商用性保障

全面兼容開源技術(shù)；整合主流開源軟件，性能穩(wěn)定性提升30%以上；具有多種在線、離線分析工具。

三、企業(yè)級(jí)數(shù)據(jù)安全保護(hù)

VPC 私有網(wǎng)絡(luò)隔離、數(shù)據(jù)冗余保護(hù)，11個(gè)9存儲(chǔ)持久性、256位傳輸加密、永不進(jìn)行數(shù)據(jù)變現(xiàn)。

客戶收益

通過華為企業(yè)云大數(shù)據(jù)解決方案，眾成就DSP平臺(tái)交出了每天17億條數(shù)據(jù)記錄處理，10分鐘完成2萬次TPS查詢，競(jìng)價(jià)的延時(shí)在60ms以內(nèi)，充分滿足了眾成就的業(yè)務(wù)需求，贏得了用戶的高度贊譽(yù)和信任。

眾成就大數(shù)據(jù)產(chǎn)品副總監(jiān)馬益民表示：“華為企業(yè)云提供靈活的云計(jì)算資源選擇，按需的資源模式可以幫助我們?cè)诹髁扛叻鍟r(shí)動(dòng)態(tài)擴(kuò)展系統(tǒng)前端投放機(jī)，并在高峰過后刪除以節(jié)省資費(fèi)，達(dá)到資源的利用最大化。在大數(shù)據(jù)系統(tǒng)的搭建方面，Mapreduce服務(wù)和對(duì)象存儲(chǔ)服務(wù)幫助我們快速的實(shí)現(xiàn)了數(shù)據(jù)從流入、存儲(chǔ)、分析、展示的整個(gè)流程。其中對(duì)象存儲(chǔ)服務(wù)良好的數(shù)據(jù)高可用性，給了以數(shù)據(jù)為核心資產(chǎn)的團(tuán)隊(duì)足夠的安全感，同時(shí)比起將數(shù)據(jù)存儲(chǔ)在本地云硬盤上又節(jié)省了很大一筆開支。而Mapreduce服務(wù)與對(duì)象存儲(chǔ)服務(wù)良好的兼容性使得我們?cè)谇逑春头治鰯?shù)據(jù)時(shí)體驗(yàn)更加流暢，清洗處理后的數(shù)據(jù)可以第一時(shí)間存入RDS做后續(xù)分析。另外，Mapreduce服務(wù)天然支持Spark內(nèi)存運(yùn)算，幫助我們?cè)跀?shù)據(jù)挖掘算法的應(yīng)用上提供了非常好的支持。通過深入的合作，華為企業(yè)云與眾成就達(dá)成了良好的合作模式與長期信賴。華為企業(yè)云迅速的服務(wù)反饋機(jī)制讓人佩服，眾多項(xiàng)目的高效及時(shí)上線為眾成就的客戶帶來切實(shí)有效的營銷服務(wù)與有價(jià)值的項(xiàng)目參考數(shù)據(jù)，成功為用戶、品牌與媒體搭建了廣告效果卓越且具有高度信任的服務(wù)平臺(tái)。希望與華為企業(yè)云的合作能繼續(xù)取得更大進(jìn)展，雙方共同成長?！?/p>

songjy