l HDFS為主存儲(chǔ)模塊和MapReduce為主的計(jì)算模塊只采用直通的方法,其它模塊的數(shù)據(jù)和管理通信都通過(guò)主干互聯(lián)平臺(tái)。
l 數(shù)據(jù)源采集模塊主要包含三種數(shù)據(jù)類型:樣本機(jī)頂盒數(shù)據(jù)和VOD視頻采集數(shù)據(jù),機(jī)頂盒操作日志數(shù)據(jù)采集和分析,通過(guò)采集策略來(lái)控制采集。
l 數(shù)據(jù)計(jì)算模塊主要負(fù)責(zé)所有數(shù)據(jù)的ETL,清晰,封裝及其裝載的服務(wù),同時(shí)分析任務(wù)的執(zhí)行也在此模塊中進(jìn)行。
l 應(yīng)用分析展示模塊主要負(fù)責(zé)B/S數(shù)據(jù)分析結(jié)果展示,和相關(guān)數(shù)據(jù)應(yīng)用的部署。
l 系統(tǒng)監(jiān)控管理模塊負(fù)責(zé)該平臺(tái)軟硬件組件的監(jiān)控管理工作。
該解決方案基于服務(wù)器集群搭建大數(shù)據(jù)平臺(tái),可以改善現(xiàn)有非結(jié)構(gòu)化數(shù)據(jù)離線服務(wù)水平;突破在傳統(tǒng)技術(shù)手段下無(wú)法解決的海量數(shù)據(jù)存儲(chǔ)彈性擴(kuò)展能力差、備份恢復(fù)難度大的問(wèn)題;利用結(jié)構(gòu)化與非結(jié)構(gòu)化歷史數(shù)據(jù)資源集中優(yōu)勢(shì),為業(yè)務(wù)提供更集成、更長(zhǎng)時(shí)間跨度、更多維度的數(shù)據(jù)查詢服務(wù),提升相關(guān)業(yè)務(wù)的查詢?cè)L問(wèn)效率,改善客戶體驗(yàn);使離線數(shù)據(jù)真正上線并得以充分利用,提高大量半結(jié)構(gòu)化非結(jié)構(gòu)化數(shù)據(jù)利用率,為業(yè)務(wù)發(fā)展提供基礎(chǔ)。
廣電行業(yè)呈現(xiàn)“兩大“應(yīng)用趨勢(shì) 大數(shù)據(jù)成為營(yíng)銷利器
在曙光看來(lái),2014年廣電行業(yè)大數(shù)據(jù)的應(yīng)用趨勢(shì)可以分為以下兩類:
第一類:收視率預(yù)測(cè)和節(jié)目營(yíng)銷
電視節(jié)目收視率和微博討論量存在著正向關(guān)系。微博討論量,可以成為預(yù)測(cè)電視收視率的重要指標(biāo)。同時(shí),對(duì)于節(jié)目推廣而言,參與節(jié)目話題討論的用戶,不是電視觀眾,就是網(wǎng)絡(luò)視頻觀眾。這些用戶ID,都是此節(jié)目的受眾。如果針對(duì)這些用戶投放廣告或推送內(nèi)容,效率肯定會(huì)很高。
第二類:臺(tái)網(wǎng)聯(lián)動(dòng)的跨平臺(tái)營(yíng)銷
隨著電視與網(wǎng)絡(luò)平臺(tái)的互補(bǔ)價(jià)值不斷凸顯,“臺(tái)網(wǎng)聯(lián)動(dòng)”已成為網(wǎng)絡(luò)媒體與傳統(tǒng)電視媒體走向融合的重要特征。之前,微博已經(jīng)在嘗試臺(tái)網(wǎng)聯(lián)動(dòng)的營(yíng)銷解決方案。具體為,微博將熱門電視節(jié)目設(shè)定為“熱門話題”,在PC端和移動(dòng)端設(shè)置話題入口,吸引網(wǎng)友進(jìn)入“熱門話題頁(yè)”,引發(fā)網(wǎng)友分享與互動(dòng),進(jìn)一步放大冠名電視節(jié)目的企業(yè)營(yíng)銷權(quán)益;
此外,節(jié)目直播的同時(shí),微博會(huì)同步在信息流中對(duì)節(jié)目話題進(jìn)行話題推薦,保證該時(shí)間段內(nèi)的展現(xiàn)機(jī)會(huì),再次加強(qiáng)企業(yè)推廣效果;通過(guò)用戶獲取信息的核心區(qū)域-信息流與話題榜的推薦,將話題的熱度最大化,從而達(dá)到提升品牌知名度的目的。
因此,我們可以預(yù)見(jiàn)2014年的廣電行業(yè),大數(shù)據(jù)應(yīng)用的針對(duì)性將更強(qiáng),用戶更希望在決策力、洞察發(fā)現(xiàn)力和流程優(yōu)化能力方面得到幫助。為此,曙光將在2014年,將會(huì)繼續(xù)秉承“立足平臺(tái),深耕應(yīng)用”的大數(shù)據(jù)戰(zhàn)略,繼續(xù)加大對(duì)研發(fā)投入,在目前已有的parastor云存儲(chǔ)、cloudview云操作系統(tǒng)、XData大數(shù)據(jù)平臺(tái)上,形成核心技術(shù)群,打造出更優(yōu)秀的產(chǎn)品。同時(shí),曙光還會(huì)把各個(gè)行業(yè)中率先形成大數(shù)據(jù)應(yīng)用的最佳實(shí)踐,在廣電大數(shù)據(jù)行業(yè)的應(yīng)用上深耕細(xì)作。