打破廣電大數(shù)據(jù)理想與現(xiàn)實(shí)間差距的0.01毫米

深圳市同洲電子股份有限公司成立于1994年，是專注于為全球用戶提供領(lǐng)先的智慧家庭產(chǎn)品與服務(wù)的高新技術(shù)企業(yè)。公司持續(xù)圍繞“智慧同洲，連接未來”的戰(zhàn)略發(fā)展思路積極拓展布局、持續(xù)提升公司的核心競(jìng)爭(zhēng)力,進(jìn)一步拓展多功能的智能機(jī)頂盒、智能路由、智能網(wǎng)關(guān)、智能音箱、網(wǎng)絡(luò)寬帶產(chǎn)品、數(shù)字前端設(shè)備，以及DVB+IP+OTT新一代業(yè)務(wù)融合平臺(tái)的研發(fā)及推廣，鞏固業(yè)務(wù)融合平臺(tái)及智慧家庭業(yè)務(wù)的創(chuàng)新優(yōu)勢(shì)及市場(chǎng)優(yōu)勢(shì)。在此基礎(chǔ)上，公司積極布局智慧家庭、智慧社區(qū)、智慧樓宇、智慧園區(qū)及物聯(lián)網(wǎng)等新興領(lǐng)域和市場(chǎng)，通過資源整合和模式創(chuàng)新拓展新的增長(zhǎng)空間。全面助力運(yùn)營(yíng)商向“智慧化”、“物聯(lián)化”升級(jí)，推動(dòng)全球數(shù)字視訊、物聯(lián)網(wǎng)產(chǎn)業(yè)的發(fā)展。同時(shí)，公司也在積極評(píng)估及探索人工智能、8K、5G等新技術(shù)在視訊領(lǐng)域的新應(yīng)用。

 

突破：同洲廣電大數(shù)據(jù)項(xiàng)目落地貴廣網(wǎng)絡(luò)

廣電行業(yè)毋庸置疑擁有著豐富的數(shù)據(jù)資源。根據(jù)國(guó)家廣電總局《2018全國(guó)廣播電視行業(yè)統(tǒng)計(jì)公報(bào)》公布內(nèi)容可窺一斑，2018年全國(guó)公共廣播節(jié)目播出時(shí)間1526.74萬小時(shí)；全國(guó)公共電視節(jié)目播出時(shí)間1925.03萬小時(shí)。2018年全國(guó)有線廣播電視實(shí)際用戶數(shù)2.18億戶, 全國(guó)有線數(shù)字電視實(shí)際用戶數(shù)2.01億戶。

 

既然廣電坐擁如此龐大的數(shù)據(jù)量，那如何讓這些數(shù)據(jù)“說話”就成為重中之重！如何實(shí)現(xiàn)這些數(shù)據(jù)的再利用，使其能夠指導(dǎo)生產(chǎn)，實(shí)現(xiàn)精準(zhǔn)廣告投放、緊扣用戶行為數(shù)據(jù)從而實(shí)現(xiàn)正真意義上把受眾發(fā)展為用戶，為廣電未來業(yè)務(wù)帶來創(chuàng)新發(fā)展的無限空間。這理想與現(xiàn)實(shí)間的那0.01毫米間距亟待突破。

 

幸運(yùn)的是，同洲已在貴廣網(wǎng)絡(luò)大數(shù)據(jù)項(xiàng)目中將其落地化為現(xiàn)實(shí)。透過在數(shù)據(jù)采集技術(shù)、數(shù)據(jù)處理、數(shù)據(jù)結(jié)構(gòu)分析中對(duì)這些海量數(shù)據(jù)的聚合、挖掘、分析、應(yīng)用，為貴廣網(wǎng)絡(luò)業(yè)務(wù)生產(chǎn)、運(yùn)維管理與用戶服務(wù)激發(fā)出新的活力。

 

截止2019年11月，貴廣網(wǎng)絡(luò)大數(shù)據(jù)系統(tǒng)已經(jīng)采集到數(shù)據(jù)的機(jī)頂盒數(shù)超過310萬臺(tái)，每一天產(chǎn)生原始數(shù)據(jù)超過15億條，通過數(shù)據(jù)清洗，日均產(chǎn)生約4000萬條完整播放記錄。

 

2019年，貴廣網(wǎng)絡(luò)在實(shí)現(xiàn)所有雙向機(jī)頂盒的數(shù)據(jù)采集后，開始建設(shè)數(shù)據(jù)分析平臺(tái)，通過對(duì)采集數(shù)據(jù)分析，實(shí)現(xiàn)了直播收視率、點(diǎn)播及時(shí)移回看排行分析，用戶流失預(yù)警、網(wǎng)絡(luò)流量監(jiān)控預(yù)警，專區(qū)頁面訂購(gòu)率，終端用戶行為事件分析等功能，另外基于大數(shù)據(jù)系統(tǒng)分析結(jié)果對(duì)接SMP網(wǎng)管，實(shí)現(xiàn)了用戶點(diǎn)播錯(cuò)誤碼統(tǒng)計(jì)預(yù)警，用戶話單提取等功能，幫助運(yùn)維人員快速定位故障。同時(shí)，貴廣網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)將數(shù)據(jù)提供給推薦系統(tǒng)、廣告系統(tǒng)等第三方業(yè)務(wù)系統(tǒng)，實(shí)現(xiàn)智能推薦、精準(zhǔn)廣告、個(gè)性化門戶等新業(yè)務(wù)，提升用戶體驗(yàn)。

 

建設(shè)：搭建互聯(lián)互通機(jī)制的平臺(tái)架構(gòu)

在進(jìn)行貴廣網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)搭建時(shí)，同洲在平臺(tái)搭建策略上堅(jiān)持做好整體規(guī)劃，以支撐大數(shù)據(jù)應(yīng)用服務(wù)為目標(biāo)，建立互聯(lián)互通機(jī)制，推動(dòng)各項(xiàng)數(shù)據(jù)的共通互聯(lián)互享；另一方面立足業(yè)務(wù)現(xiàn)實(shí)，分步推進(jìn)大數(shù)據(jù)平臺(tái)的建設(shè)與完善。

 

在平臺(tái)架構(gòu)上，主要分為數(shù)據(jù)采集層、應(yīng)用層和展現(xiàn)層。透過主要架構(gòu)的搭建，助力貴廣網(wǎng)絡(luò)透過大數(shù)據(jù)平臺(tái)采集、存儲(chǔ)、挖掘數(shù)據(jù)資產(chǎn)，通過大數(shù)據(jù)平臺(tái)對(duì)媒體內(nèi)容數(shù)據(jù)、用戶服務(wù)數(shù)據(jù)進(jìn)行全方位分析挖掘，從而提升媒體內(nèi)容生產(chǎn)的能力，創(chuàng)新網(wǎng)絡(luò)視聽業(yè)務(wù)產(chǎn)品，升級(jí)媒體運(yùn)營(yíng)服務(wù)、加強(qiáng)媒體傳播的監(jiān)測(cè)監(jiān)管。

 

其中在大數(shù)據(jù)處理流程上，從數(shù)據(jù)采集、數(shù)據(jù)預(yù)處理、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)處理、數(shù)據(jù)分析挖掘、統(tǒng)一數(shù)據(jù)服務(wù)到數(shù)據(jù)應(yīng)用等環(huán)節(jié)的處理實(shí)現(xiàn)閉環(huán)。即將數(shù)據(jù)應(yīng)用產(chǎn)生的數(shù)據(jù)作為新數(shù)據(jù)源采集進(jìn)入大數(shù)據(jù)處理平臺(tái)，形成完整的應(yīng)用機(jī)制。

 

當(dāng)前貴廣網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)一期建設(shè)共35臺(tái)服務(wù)器，總計(jì)可以存儲(chǔ)104TB數(shù)據(jù)，依據(jù)當(dāng)前每日新增數(shù)據(jù)估算，其中離線原始數(shù)據(jù)最大可保存52個(gè)月，當(dāng)前還可支持33個(gè)月的存儲(chǔ)，離線數(shù)據(jù)報(bào)表的顯示策略為最近3個(gè)月；在線原始入庫數(shù)據(jù)最大可保存23個(gè)月，當(dāng)前還可支持15個(gè)月的存儲(chǔ)，在線數(shù)據(jù)報(bào)表顯示策略為最近1周。報(bào)表數(shù)據(jù)實(shí)時(shí)展示近期5分鐘內(nèi)的數(shù)據(jù)。

 

應(yīng)用：為貴廣網(wǎng)絡(luò)業(yè)務(wù)提供全流程服務(wù)支撐

在貴廣網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)項(xiàng)目建設(shè)中，同洲在數(shù)據(jù)應(yīng)用服務(wù)上主要聚焦在生產(chǎn)運(yùn)營(yíng)場(chǎng)景：如廣電大數(shù)據(jù)共享服務(wù)、用戶分類、個(gè)性化推薦、經(jīng)營(yíng)分析。用戶服務(wù)場(chǎng)景：如收視行為分析、用戶活躍度分析、客戶服務(wù)等。

 

用戶趨勢(shì)分析功能：通過離線數(shù)據(jù)收集全網(wǎng)所有互動(dòng)用戶的每日活躍度情況，可根據(jù)區(qū)域信息，分析近期的新增用戶，在線用戶數(shù)據(jù)，并呈現(xiàn)在報(bào)表中，供運(yùn)營(yíng)分析使用。

 

用戶流失預(yù)警功能：基于大數(shù)據(jù)的信息收集的情況下，利用用戶播放行為數(shù)據(jù)，付費(fèi)行為數(shù)據(jù)，使用機(jī)器學(xué)習(xí)方法，推斷一段時(shí)間后可能會(huì)流失的用戶數(shù)據(jù)，給系統(tǒng)運(yùn)營(yíng)，挽留用戶提供數(shù)據(jù)支持，提高工作效率。

 

直播頻道收視數(shù)據(jù)分析及報(bào)表功能：通過離線數(shù)據(jù)收集全網(wǎng)所有互動(dòng)用戶直播數(shù)據(jù)信息，對(duì)直播頻道的收視率等數(shù)據(jù)進(jìn)行計(jì)算，輸出報(bào)表呈現(xiàn)。

 

點(diǎn)播、時(shí)移及回看數(shù)據(jù)分析及用戶播放清單報(bào)表功能：通過離線數(shù)據(jù)收集全網(wǎng)所有互動(dòng)用戶點(diǎn)播數(shù)據(jù)信息，對(duì)媒資點(diǎn)播排行，欄目點(diǎn)播排行，用戶時(shí)移播放及用戶回看播放進(jìn)行計(jì)算分析，并可根據(jù)區(qū)域信息，輸出用戶播放清單等詳細(xì)報(bào)表。

 

組播切換清單功能：針對(duì)IP平臺(tái)用戶，同時(shí)收集用戶在觀看直播過程中的組播切換情況，輸出報(bào)表，用于分析終端用戶區(qū)域的網(wǎng)絡(luò)狀況信息。

 

在線數(shù)據(jù)分析及報(bào)表功能：根據(jù)終端探針上報(bào)的用戶行為，對(duì)用戶行為事件進(jìn)行分類采集，并分析清洗，輸出用戶行為報(bào)表功能。

 

專區(qū)用戶訂購(gòu)率及點(diǎn)播轉(zhuǎn)化率報(bào)表：根據(jù)特定的專區(qū)用戶點(diǎn)播行為及訂購(gòu)信息數(shù)據(jù)，分析計(jì)算，輸出用戶點(diǎn)播轉(zhuǎn)化率及專區(qū)用戶的訂購(gòu)率報(bào)表功能。

 

還有流量數(shù)據(jù)報(bào)表功能、數(shù)據(jù)采集數(shù)據(jù)輸出功能等等。

 

未來：逐步規(guī)劃構(gòu)建全新格局，賦能貴廣網(wǎng)絡(luò)

同洲大數(shù)據(jù)項(xiàng)目在貴廣網(wǎng)絡(luò)中的應(yīng)用，將不斷推動(dòng)貴廣網(wǎng)絡(luò)的智慧發(fā)展，全面提升貴廣網(wǎng)絡(luò)的商業(yè)價(jià)值，為貴廣網(wǎng)絡(luò)產(chǎn)業(yè)升級(jí)提供支撐。

 

在后續(xù)的規(guī)劃建設(shè)中，同洲將持續(xù)提供更多可廣泛應(yīng)用在廣播電視內(nèi)容的采集與生產(chǎn)、節(jié)目的推薦與經(jīng)營(yíng)、用戶的跟蹤與服務(wù)、輿情的監(jiān)控與管理的功能應(yīng)用，包括：

 

數(shù)據(jù)采集可視化編輯功能：對(duì)當(dāng)前的數(shù)據(jù)采集系統(tǒng)及報(bào)表輸出功能進(jìn)行功能優(yōu)化改造，將大數(shù)據(jù)做成可視化編輯，數(shù)據(jù)結(jié)果可自定義排列，自定義選擇所有字段，自定義報(bào)表樣式，自定導(dǎo)出結(jié)果，自定義查詢條件。

 

用戶畫像功能：基于數(shù)據(jù)采集的用戶行為分析，將用戶的每個(gè)具體信息抽象成標(biāo)簽，利用這些標(biāo)簽將用戶形象具體化，建立用戶畫像功能，針對(duì)特定的用戶群體進(jìn)行差異化服務(wù)。

 

收視報(bào)告分析：支持廣告運(yùn)營(yíng)大數(shù)據(jù)分析，廣告精準(zhǔn)投放；支持智能推薦，提升用戶ARPU 值；聚類分析、軌跡分析留住客戶 ，大數(shù)據(jù)分析能夠通過聚類分析，了解每個(gè)客戶日常喜愛收看的節(jié)目類型和頻道類型，以及對(duì)最新大片的可能購(gòu)買度，讓客戶經(jīng)理能挑出最有可能購(gòu)買產(chǎn)品的前20%的用戶，采取上門拜訪或電話推廣的方式，迅速有效的達(dá)成交易；

 

運(yùn)維上的應(yīng)用：有效處理故障——用戶終端通過雙向網(wǎng)絡(luò)將其狀態(tài)數(shù)據(jù)、管理控制信息等數(shù)據(jù)上傳，終端管理系統(tǒng)通過雙向協(xié)議，在通過對(duì)終端設(shè)備進(jìn)行開機(jī)管理、認(rèn)證鑒權(quán)、參數(shù)讀寫、日志上報(bào)、升級(jí)管理、故障診斷等管理操作的基礎(chǔ)上，實(shí)現(xiàn)用戶終端的可視化管理、終端運(yùn)行狀態(tài)可呈現(xiàn)、終端可控、故障可遠(yuǎn)程診斷。終端管理系統(tǒng)能夠以定制化報(bào)表，以各種粒度提供當(dāng)前系統(tǒng)網(wǎng)絡(luò)、業(yè)務(wù)的運(yùn)營(yíng)狀態(tài)的信息，提供給系統(tǒng)管理人員了解網(wǎng)絡(luò)當(dāng)前的運(yùn)營(yíng)情況，為高層進(jìn)行系統(tǒng)決策提供依據(jù)，提升廣電運(yùn)營(yíng)商的服務(wù)質(zhì)量和管理效率；運(yùn)維趨勢(shì)預(yù)測(cè)——在管理系統(tǒng)的運(yùn)營(yíng)中，會(huì)積累足夠多的數(shù)據(jù)，形成整個(gè)網(wǎng)絡(luò)的運(yùn)行狀態(tài)曲線，由管理系統(tǒng)根據(jù)一定的算法計(jì)算出網(wǎng)絡(luò)的運(yùn)行趨勢(shì)數(shù)據(jù)。當(dāng)系統(tǒng)監(jiān)測(cè)到當(dāng)前的網(wǎng)絡(luò)運(yùn)行狀態(tài)偏離了趨勢(shì)曲線時(shí)，系統(tǒng)發(fā)出預(yù)警信息，方便運(yùn)維人員及時(shí)對(duì)網(wǎng)絡(luò)進(jìn)行檢測(cè)和調(diào)整，把問題解決在尚未大面積發(fā)生的狀態(tài)等等

 

同洲貴廣網(wǎng)絡(luò)大數(shù)據(jù)項(xiàng)目的實(shí)踐是在努力將廣電大數(shù)據(jù)的價(jià)值發(fā)揮出來，從而真正形成廣電企業(yè)的數(shù)據(jù)資產(chǎn)，創(chuàng)造出數(shù)據(jù)應(yīng)有的價(jià)值。