“業(yè)務是檢驗大數據價值的核心標準,東方明珠兩年摸索前行,走出了自主、創(chuàng)新、可控的大數據建設之路,樹立廣電行業(yè)互聯網+轉型的一面標桿。”——胡俊
1994年,東方明珠成為國內首家文化傳媒上市公司;2011年,百視通上市,開創(chuàng)廣電新媒體上市先河;2014年,大小文廣合并,百視通吸收合并原東方明珠重大資產重組啟動;2015年,東方明珠新媒體股份有限公司成立,這是我國第一家產業(yè)鏈一體化布局的傳媒文化上市公司,集團分設四大事業(yè)群,包括媒體網絡事業(yè)群、影視互娛事業(yè)群、視頻購物事業(yè)群、文旅消費事業(yè)群。作為一名從業(yè)近二十年的軟件研發(fā)老兵,胡俊也正是在此時,出任東方明珠新媒體研究院研發(fā)總監(jiān),負責集團大數據平臺建設;在互聯網轉型的大戰(zhàn)略下,經歷了從大重組調整到現在的融媒轉型,一路走來,見證了“技術力量驅動業(yè)務發(fā)展”在廣電行業(yè)的落地。
歷時兩年,見證新媒體戰(zhàn)略穩(wěn)穩(wěn)落地
東方明珠作為綜合文化傳媒集團,迎合新媒體轉型的浪潮,積極構建自己的“文娛+”生態(tài)圈。在公司高級副總裁、首席技術官范若晗女士的領導下,東方明珠這兩年不斷的在大數據、人工智能、垂直電商、云計算、物聯網等領域結合傳媒行業(yè)背景,進行了技術嘗試與變革創(chuàng)新,打造出了適合廣電行業(yè)的轉型之路。
東方明珠新媒體轉型目標
東方明珠研究院的研發(fā)團隊,是在互聯網轉型大戰(zhàn)略的方針指導下,公司自行組建并培養(yǎng)的一支精銳部隊,分為數據平臺組、測試運維組、軟件開發(fā)組和產品項目組四個核心小組。研發(fā)團隊負責整個集團大數據平臺及相關系統(tǒng)的建設,主要職責:
1.在匯聚公司核心業(yè)務用戶信息的基礎上,通過前端用戶行為埋點采集,獲取并接入線上線下業(yè)務的用戶全量數據。
2.引入優(yōu)質外部數據,豐富視頻、商品的基礎標簽,擴充內容分析維度,提高用戶畫像的精度。
3.新建適用于全渠道用戶經營的推薦引擎,直接對接線上業(yè)務系統(tǒng)或線下業(yè)務場景,基于內容標簽和用戶畫像實現精準個性化推薦和營銷觸達。
同時,團隊通過增強基礎數據平臺的穩(wěn)定性、安全性、計算處理能力及效率,協同業(yè)務逐步形成數據驅動的經營機制,精準用戶洞察,實現精準導流、深度運營,為存量業(yè)務的精細化運營及新業(yè)務的針對性,拓展提供堅實有力的數據支撐。
東方明珠研發(fā)團隊
在公司的大力支持下,這支團隊銳意進取、開拓創(chuàng)新,無論是早期摸石頭過河、還是選擇行業(yè)內領先的合作伙伴(如神策數據、公有云服務商等),都秉承著自主可控、精益求精的原則。兩年建設期,這支團隊攻城拔寨,喜訊不斷傳來:
2016年9月份,大數據建設相關規(guī)劃正式立項啟動
2017年3月份,用戶中心管理平臺一期成功上線
2017年12月份,用戶中心管理平臺二期順利發(fā)布、DevOps項目試點成功
2018年2月份,會員系統(tǒng)一期改造完成
2018年6月,整合用戶中心和會員中心,升級為數據中臺,數據中臺初步整合完成,全集團39個駐地全業(yè)務線逐步投入使用
2018年6月底,基于大數據人工智能的智能推薦平臺上線、DevOps平臺推廣到整個集團研發(fā)相關部門
2018年9月份,會員系統(tǒng)二期改造完成、前端全業(yè)務端口打通
……
業(yè)務是檢驗大數據價值的核心標準
東方明珠數據中臺,是目前全公司39個駐地全業(yè)務線都在使用的大數據分析平臺,是實現公司業(yè)務數據全面匯集、智能應用、精細運營的數據資源池。數據中臺整合的業(yè)務數據包括小紅巢、東方購物、百視通IPTV、百視通App、百視通OTT、游戲群、東方明珠塔、看看新聞App等等;均通過東方明珠自建的“數據管道”進行一手數據采集、清洗、處理和分析,然后應用到各業(yè)務線的固定報表服務、多維分析服務、用戶畫像服務、即席查詢服務、東方明珠知識庫以及機器學習平臺(如智能推薦系統(tǒng)、營銷推送系統(tǒng)等)。
東方明珠OPG數據中臺
談到數據中臺建設的點滴歷程,胡俊借用東方明珠旗下百視通總經理程曦的原話告訴筆者,東方明珠的大數據建設,就是“要讓需要數據的崗位都用起來,數據用得多了、用得好了,就越用越準”。在一年半之前,數據中臺上線試運行期間,當時有臺服務器宕機了一周,居然沒有任何人發(fā)現;到現在,做內外網用戶的安全切換測試,期間只能用VPN訪問,短短1個小時,他的電話被十幾個駐地的同事給打爆了。
大數據平臺初期建設,主要是研發(fā)部門在推動,后來伴隨著公司戰(zhàn)略調整、業(yè)務升級,業(yè)務部門越來越依賴大數據平臺的使用,參與度越來越深;平臺升級為數據中臺及后續(xù)業(yè)務融合,都是業(yè)務部門需求驅動的。目前使用范圍已經覆蓋全業(yè)務線。自助式服務是東方明珠數據中臺一大特色,極大改善了業(yè)務人員使用數據的效率和應用深度。
為了真正發(fā)揮數據中臺的價值,東方明珠大數據工程主要從以下幾個方面著力建設:
1.成立戰(zhàn)略專項小組。公司從計劃伊始就成立了戰(zhàn)略專項小組,黨委書記和總裁分別任組長和副組長;各業(yè)務部門牽頭的都是集團副總,從上而下貫徹餞行大數據戰(zhàn)略。
2.數據需求匯總管理。大數據相關需求,全部匯總到總部數據研發(fā)小組,不再進行獨立小數倉和報表系統(tǒng)的研發(fā);規(guī)范和嚴格元數據管理、數據質量管理,實現統(tǒng)一管理、統(tǒng)一發(fā)布、統(tǒng)一運營。
3.分步走、階段性項目推進機制。將大數據相關建設項目,實現集中指揮、統(tǒng)籌調度、資源共享,分階段分批進行落地處理、每個階段融入一部分關鍵業(yè)務,產出階段性成果,再進行其他業(yè)務和平臺整合。
4.充分擁抱開源系統(tǒng)。傳統(tǒng)商業(yè)軟件無法滿足東方明珠這個體量和業(yè)務復雜度的大數據需求,并且廣電行業(yè)對自主可控、數據保護、安全隱私要求較高。
5.沙堆模型落地DevOps。采用“沙堆模型”在多個業(yè)務線開展DevOps的工具鏈落地,加速研發(fā)流程,逐步遷移、持續(xù)部署、持續(xù)集成。
6.構建大數據生態(tài)合作體系。篩選適合東方明珠大數據發(fā)展體系的生態(tài)合作伙伴,如神策數據、公有云服務商等,這些服務商在整個中國的大數據生態(tài)圈里,都扮演著舉足輕重的角色。
大數據項目建設是否成功,業(yè)務是檢驗的核心標準。東方明珠的大數據建設和應用深度日益成熟,并持續(xù)引領行業(yè)邁步向前。從廣電領域的視頻、電視購物、文化旅游地產,到現在的用戶價值精細化運營,東方明珠一直是整個廣電行業(yè)的翹楚。
教學相長,構建安全自主可控的大數據平臺
廣電領域強調安全、自主、可控,東方明珠所有的信息系統(tǒng)、數據系統(tǒng),都必須滿足國家合規(guī)性的要求,比如源數據要自主自控、異地多活,權限控制矩陣,強用戶管理體系等。東方明珠與其生態(tài)合作體系的合作伙伴們,一直是教學相長的關系,一路走來,共同把東方明珠數據中臺成功建設完成。以神策數據為例,目前東方明珠與神策數據的合作包括旗下的東方購物、百視通、梅奔中心、公有云服務商平臺優(yōu)化改造、甚至一些垂直孵化項目等等。
東方明珠駐地眾多,總部技術團隊需要支撐的業(yè)務范圍輻射較廣,DevOps平臺的推廣和專業(yè)服務商的引入,較大的緩解了技術人力稀缺的挑戰(zhàn)。在專業(yè)服務商選擇上,胡俊說:東方明珠非??粗胤丈淘谙嚓P領域的實戰(zhàn)經驗,技術的成熟度、解決方案的成熟度,公司資質和團隊背景。在跟神策數據合作的過程中,對神策數據團隊的產品和服務都很認可,除了大數據用戶行為分析平臺外,尤其對埋點服務和神策推薦算法的精準度非常滿意。
以百視通IPTV某駐地為例,日活數百萬用戶通過IPTV機頂盒付費觀看授權內容,部分精品內容需額外充值觀看;在接入神策推薦之前,主要依賴人工推薦,以熱門、付費和內容相關性為主要推薦參考。為提升用戶的觀影體驗、提高用戶留存以及充值付費營收,東方明珠利用神策推薦解決方案,完成采集點擊日志、展示日志、播放日志等所需用戶行為數據,基于行為數據構建深度學習召回算法策略,采用GBDT+LR排序模型訓練數據。推薦算法上線兩周后,神策推薦的效果,對比人工推薦,僅CTR一個指標即提升了6倍,對推薦內容的人均瀏覽次數提升了1.9倍。
神策推薦全流程示意圖
大數據平臺建設項目,東方明珠團隊對自主自控要求較高,在用戶行為分析、埋點等相關領域,神策數據所提供的技術和方案較為成熟,并且神策分析PaaS平臺的延展性和開放性能較好滿足集團復雜業(yè)務和自主可控的需求,因此東方明珠利用神策分析平臺,充分打通內部業(yè)務數據,發(fā)揮資源優(yōu)勢,構建一體化運作的融媒體大數據用戶分析中心;在精準推薦項目中,東方明珠采用了,與神策數據一起敏捷迭代的合作模式,即基于神策推薦平臺,雙方投入研發(fā)資源,針對廣電行業(yè)的個性化需求進行推薦算法的打磨升級,并基于神策推薦平臺進行廣電行業(yè)個性化應用和場景的深度開發(fā),經過試點駐地的實際結果檢驗,目前已在各大駐地展開推廣。
召回模型神經網絡結構
在跟胡俊的采訪中,他坦言,自己很幸運,因為大數據建設工程的成功,是離不開公司的大力支持,尤其是類似東方明珠這種體量和復雜業(yè)態(tài)的傳媒集團。內部數據打通難度,平臺是否安全、自主、可控,以及數據在業(yè)務線如何深入應用,都是至關重要的點。胡俊說:萬里長征第一步,我們團隊一起順利邁出去了,我相信東方明珠的大數據平臺能成為廣電行業(yè)第一家。真正把數據價值充分發(fā)揮和應用,并且為同行的大數據建設提供指導參考。
關于神策數據
神策數據是專業(yè)的大數據分析平臺服務提供商,致力于幫助客戶實現數據驅動。公司圍繞用戶級大數據分析和管理需求,推出神策分析、神策客景、神策自動化運營、神策智能推薦等產品。神策分析是深度用戶行為分析平臺,支持私有化部署、基礎數據采集與建模,并作為PaaS平臺支持二次開發(fā),同時還支持用戶精準分群,用戶標簽體系的構建;神策客景是基于行為數據的客戶全生命周期分析平臺,創(chuàng)造性將用戶行為數據融入客戶生命周期的管理與分析,實現客群健康度分析,流失預警等重要價值,并應用到企業(yè)服務、工具軟件等多個領域;神策自動化運營是基于分群標簽的全流程運營閉環(huán)分析系統(tǒng),通過用戶精準分群、靈活創(chuàng)建并管理營銷活動計劃,一鍵執(zhí)行計劃觸達用戶,并實時分析活動效果,真正形成自動化、精細化的運營閉環(huán);神策智能推薦是基于用戶行為分析的全流程智能推薦系統(tǒng),幫助企業(yè)實現對用戶“千人千面”的個性化內容推薦,改善用戶體驗,持續(xù)提升核心業(yè)務指標。
此外,還提供大數據相關咨詢和完整解決方案。神策數據積累了中國銀聯、中國電信、百度視頻、百聯、萬達、小米、中郵消費金融、廣發(fā)證券、中原銀行、百信銀行、聚美優(yōu)品、中商惠民、紛享銷客、Keep、36氪、中青旅、平安壽險、鏈家、四川航空等500余家付費企業(yè)用戶的服務和客戶成功經驗,為客戶全面提供指標梳理、數據模型搭建等專業(yè)的咨詢、實施和技術支持服務。希望更深入了解神策數據或有數據驅動相關問題,請撥打4006509827電話咨詢,會有專業(yè)的工作人員為您解答。
免責聲明:本網站內容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網站出現的信息,均僅供參考。本網站將盡力確保所提供信息的準確性及可靠性,但不保證有關資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網站對有關資料所引致的錯誤、不確或遺漏,概不負任何法律責任。任何單位或個人認為本網站中的網頁或鏈接內容可能涉嫌侵犯其知識產權或存在不實內容時,應及時向本網站提出書面權利通知或不實情況說明,并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網站在收到上述法律文件后,將會依法盡快聯系相關文章源頭核實,溝通刪除相關內容或斷開相關鏈接。