1. <strong id="7actg"></strong>
    2. <table id="7actg"></table>

    3. <address id="7actg"></address>
      <address id="7actg"></address>
      1. <object id="7actg"><tt id="7actg"></tt></object>

        網(wǎng)易嚴選 x 網(wǎng)易有數(shù):數(shù)據(jù)產(chǎn)品+數(shù)據(jù)中臺雙引擎模式實踐

        共 4821字,需瀏覽 10分鐘

         ·

        2021-07-02 11:52

        導(dǎo)讀:作為一個“平臺+品牌”雙模式并存的電商品牌,網(wǎng)易嚴選(下文簡稱嚴選)的數(shù)據(jù)數(shù)據(jù)鏈路天然很長,這給數(shù)據(jù)化決策和數(shù)據(jù)化運營帶來了不一樣的挑戰(zhàn),嚴選如何打造數(shù)據(jù)支撐體系支撐業(yè)務(wù)發(fā)展?在6月19日的“網(wǎng)易數(shù)帆技術(shù)沙龍”上,網(wǎng)易數(shù)帆大數(shù)據(jù)產(chǎn)品專家顧平分享了網(wǎng)易嚴選數(shù)據(jù)產(chǎn)品建設(shè)實踐心得,以及支撐數(shù)據(jù)產(chǎn)品建設(shè)的一些難點難題的解決策略。自2017年開始,顧平作為數(shù)據(jù)產(chǎn)品負責(zé)人參與了從0到1建設(shè)整個嚴選據(jù)產(chǎn)品體系和數(shù)據(jù)中臺,歷經(jīng)3年時間打磨,嚴選數(shù)據(jù)產(chǎn)品和數(shù)據(jù)中臺已經(jīng)非常成熟。

        嚴選的模式,從供應(yīng)端商品的設(shè)計、研發(fā)、生產(chǎn)一直到最后的消費端,整個鏈路都有數(shù)據(jù),嚴選通過商品數(shù)據(jù)運營平臺、營銷數(shù)據(jù)運營平臺、移動數(shù)據(jù)工作臺和供應(yīng)鏈數(shù)據(jù)運作平臺等4種數(shù)據(jù)產(chǎn)品驅(qū)動全鏈路的業(yè)務(wù)。需要注意的是,數(shù)據(jù)產(chǎn)品下面一定要有數(shù)據(jù)中臺中臺去支撐,否則我們沒辦法做到數(shù)據(jù)產(chǎn)品的高效研發(fā)和數(shù)據(jù)質(zhì)量,這是一種雙引擎的模式,數(shù)據(jù)產(chǎn)品和數(shù)據(jù)中臺,是數(shù)據(jù)雙引擎
        數(shù)據(jù)產(chǎn)品:聚焦商品、營銷與供應(yīng)
        網(wǎng)易定義的數(shù)據(jù)產(chǎn)品,是一類既反映分析思路又能與業(yè)務(wù)系統(tǒng)聯(lián)動的決策型產(chǎn)品。數(shù)據(jù)產(chǎn)品最基礎(chǔ)是實現(xiàn)可視化,在這個基礎(chǔ)上還要去實現(xiàn)決策建議,比如說監(jiān)控診斷,最終可能要去驅(qū)動決策,比如說這個數(shù)據(jù)產(chǎn)品里面的一份數(shù)據(jù),可以直接同步到業(yè)務(wù)系統(tǒng)里面,生成采購單。對于數(shù)據(jù)中臺來說,主要是提供高效的高質(zhì)量的數(shù)據(jù)服務(wù),來支撐上面的數(shù)據(jù)產(chǎn)品和業(yè)務(wù)系統(tǒng)。
        嚴選組織架構(gòu)主要有商品中心、營銷中心和供應(yīng)鏈中心,數(shù)據(jù)產(chǎn)品也是圍繞這三大中心,針對不同的用戶去開發(fā)的。針對營銷中心的數(shù)據(jù)產(chǎn)品,叫伏羲-營銷數(shù)據(jù)運營平臺,負責(zé)消費者的數(shù)字化運營。針對供應(yīng)鏈中心,我們有一個叫河洛-供應(yīng)鏈數(shù)據(jù)運作平臺,負責(zé)數(shù)字化供應(yīng)。針對商品中心,有大麥-商品數(shù)據(jù)運營平臺,面向我們商品中心里面各個商品BU。中間這一塊是負責(zé)數(shù)字化管理的移動數(shù)據(jù)工作臺,它的核心目標用戶是管理層,但也開放給所有的業(yè)務(wù)部門。它是一個移動端產(chǎn)品,使用非常方便。
        嚴選做的第一款數(shù)據(jù)產(chǎn)品是做移動數(shù)據(jù)工作臺。因為數(shù)據(jù)中臺或者數(shù)據(jù)產(chǎn)品最好是自上而下來做,讓領(lǐng)導(dǎo)意識到數(shù)據(jù)的重要性,讓他看到可以優(yōu)化決策,他才能幫助推廣數(shù)據(jù)產(chǎn)品,支持數(shù)據(jù)團隊去做更多的東西。其實嚴選移動數(shù)據(jù)工作臺最重度的用戶就是嚴選CEO,他的訪問量是第二名的兩倍多。
        嚴選移動數(shù)據(jù)工作臺是基于H5,在嚴選APP這個殼的基礎(chǔ)上面去增加了一些入口,有針對商品、銷售、用戶、流量等核心數(shù)據(jù),也包括了KPI的實現(xiàn)情況,整個業(yè)務(wù)的監(jiān)控都會在這里面。
        結(jié)合嚴選APP做的好處是非常直觀。這里面還有一個流量地圖,開啟之后,在APP界面中的每一個模塊上面都會有一個半透明浮層,展示各個模塊素材的點擊量、轉(zhuǎn)化率以及對銷售的貢獻,非常直觀,業(yè)務(wù)都非常喜歡用這樣的東西。
        供應(yīng)鏈數(shù)據(jù)運作平臺的理念是需求驅(qū)動供應(yīng)。因為嚴選連接了消費和制造商,對于供應(yīng)鏈數(shù)據(jù)運作平臺,核心就是把嚴選側(cè)的銷售計劃、需求計劃共享給供應(yīng)商,嚴選專門為供應(yīng)商制作了一個平臺(業(yè)務(wù)系統(tǒng)),我們把數(shù)據(jù)輸出到那個系統(tǒng)里面去,使得所有的供應(yīng)商都能在那里面共享到我們的數(shù)據(jù),知道我們的計劃是怎么樣的,可以提前去生產(chǎn)排程。
        供應(yīng)鏈數(shù)據(jù)運作平臺如果要定一個核心KPI,那就是庫轉(zhuǎn),我們應(yīng)該讓庫轉(zhuǎn)在一個合理的范圍內(nèi),所以它核心要解決的問題是商品在什么時間點采多少量,它需要有需求計劃之類的東西,還有一些規(guī)則,比如安全庫存是多少,這個商品如果讓制造商去開發(fā)了,他的開發(fā)周期是多少,這些數(shù)據(jù)我們都需要知道,才能夠定義出一個商品應(yīng)該在什么時間點采多少量,這里面更多的是業(yè)務(wù)知識和規(guī)則
        關(guān)于監(jiān)控診斷,這是我們面向商品中心的大麥產(chǎn)品中的監(jiān)控診斷,我們可以直接展示出哪些商品慢動銷了,哪些庫存高了,銷量下跌了,有多少商品涉及到這些問題,這些異常情況都可以直接展現(xiàn)出來。如果業(yè)務(wù)方還要想要繼續(xù)了解這里面到底是什么原因造成的,我們可以有這種類似于拓撲圖的分析,讓它直接去定位原因,所以它既是個工具,同時也沉淀了知識。
        數(shù)據(jù)中臺:圍繞高效、高質(zhì)量構(gòu)建
        嚴選對于數(shù)據(jù)中臺的定義,是高效的高質(zhì)量的賦能數(shù)據(jù)前臺的一系列的數(shù)據(jù)系統(tǒng)和數(shù)據(jù)服務(wù)的組合。如下是我們數(shù)據(jù)中臺全景圖,最上面那層黃的是數(shù)據(jù)應(yīng)用層(即數(shù)據(jù)前臺),包括了前面講的數(shù)據(jù)產(chǎn)品和業(yè)務(wù)系統(tǒng),因為業(yè)務(wù)系統(tǒng)也會用我們的數(shù)據(jù)。
        還有有數(shù)BI,分析師用有數(shù)BI生產(chǎn)出來的一些報表,也是屬于數(shù)據(jù)應(yīng)用的范圍。但是有數(shù)BI這個平臺本身是一個敏捷分析的工具,所以我們把它放到了數(shù)據(jù)中臺體系里面。綠色的部分是數(shù)據(jù)服務(wù),它的核心服務(wù)對象是數(shù)據(jù)產(chǎn)品和業(yè)務(wù)系統(tǒng)。下面是圍繞數(shù)倉的管理體系。藍色區(qū)域整塊都是基于網(wǎng)易有數(shù)去實現(xiàn)的數(shù)據(jù)中臺體系。
        高效高質(zhì)量的實踐,首先看高效分析,嚴選是基于有數(shù)BI實現(xiàn)的。大家在做數(shù)據(jù)產(chǎn)品的時候會發(fā)現(xiàn)一個問題,做了一個數(shù)據(jù)產(chǎn)品給業(yè)務(wù)用,結(jié)果數(shù)據(jù)需求接踵而來,研發(fā)都來不及,這個時候我們需要有一個高效交付的方案,讓分析師或者業(yè)務(wù)方能夠自助地去完成這些事情,我們把數(shù)倉建設(shè)好,分析師或業(yè)務(wù)自己來使用數(shù)據(jù)。嚴選的模式是分析師做報告,業(yè)務(wù)方提需求,所以在BI這塊,底下是我們的數(shù)倉,分析師用數(shù)倉里面的數(shù)據(jù),在有數(shù)上面去做報表出來,提供給業(yè)務(wù)人員?,F(xiàn)在整個嚴選有數(shù)(網(wǎng)易有數(shù)·BI在嚴選的私有部署)的用戶有900多人,每天的UV要達到400多,有8萬個圖表。
        具體而言,當我們的分析師收到需求的時候,他會通過有數(shù)大數(shù)據(jù)開發(fā)及管理平臺提供的指標地圖去找這個指標,已經(jīng)實現(xiàn)了,就拿來直接用,如果還沒有,他就提需求給我們的數(shù)據(jù)開發(fā),然后來定義這個指標(指標定義的流程后文再講)。數(shù)據(jù)開發(fā)去會利用我們有數(shù)的大數(shù)據(jù)開發(fā)及管理平臺去進行一個主題域建設(shè)。建設(shè)過程其實做需求的過程,這是一個螺旋式上升的過程。
        通過這個平臺數(shù)據(jù)開發(fā)很容易就把需求給做出來,然后分析師用有數(shù)BI去進行可視化建模,他不需要寫代碼,本質(zhì)上它設(shè)計的是面向業(yè)務(wù)的,可以快速完成一個模型,然后通過類似于制作PPT的方式去探索和實現(xiàn)數(shù)據(jù)的可視化。BI主要是用來高效分析的,核心的價值就在于能夠非常高效地迭代,通常上午來的需求下午就能出報表。
        數(shù)據(jù)產(chǎn)品的高效交付,第一種方式,我們借用BI里面集成的功能實現(xiàn),就是說把需求轉(zhuǎn)嫁到BI上面,通過BI當天就可以把報告做出來,然后通過集成的API直接把它集成到我們的數(shù)據(jù)產(chǎn)品或者是業(yè)務(wù)系統(tǒng)上面去?,F(xiàn)在我們移動數(shù)據(jù)工作臺里面已經(jīng)有20多個報表被集成進去了,基本上都是CXO的緊急需求,所以交付要比較高效,很多時候小半天就能交付了,用戶對這種高效交付是非常滿意的。
        另外一種方式是說我們真的要高效研發(fā),我們構(gòu)建了一個統(tǒng)一查詢服務(wù),這個服務(wù)其實就只有一個API,數(shù)據(jù)需求來了之后,通過它我們只要去設(shè)計模型就可以了,這就是“模型即服務(wù)”,對于數(shù)據(jù)產(chǎn)品或業(yè)務(wù)系統(tǒng)來講,他完全不用關(guān)心這個模型到底用了什么庫什么表,只需要關(guān)心接口輸入。
        通過這一層,我們不僅僅把數(shù)據(jù)帶出去,還把指標定義也帶出去,這樣的一個好處是,不管在數(shù)據(jù)產(chǎn)品里面還是在業(yè)務(wù)系統(tǒng)里面,但凡是用到了同一個指標,它的定義也是動態(tài)獲取的,是統(tǒng)一的。嚴選現(xiàn)在有70多個系統(tǒng)在用我們的統(tǒng)一查詢服務(wù)。
        關(guān)于數(shù)據(jù)質(zhì)量,我們主要來看下指標一致性的保障,指標一致性我們是怎么去解決的?可能大家都聽說過指標管理系統(tǒng),但是如果真的只有這么一個系統(tǒng),其實它跟wiki或者其他文檔系統(tǒng)沒有什么本質(zhì)上的差別。指標管理系統(tǒng)的本質(zhì)上的差別在于,我通過這個系統(tǒng)跟我整個數(shù)據(jù)設(shè)計、開發(fā)、使用的流程全部打通,這才是它最核心的能力。
        定義指標的時候,要統(tǒng)一定義,因為指標代表了一種數(shù)據(jù)需求更是一種業(yè)務(wù)知識,不能說隨便就定義一個指標出來。在嚴選我們是數(shù)據(jù)產(chǎn)品經(jīng)理和分析師一起來定義,我們拿到需求的時候,會一起商量這個指標應(yīng)該怎么去具體定義。定義完成了之后,我們在有數(shù)大數(shù)據(jù)開發(fā)及管理平臺里面的模型設(shè)計系統(tǒng)去設(shè)計它,設(shè)計完了之后才會去進行具體的開發(fā)。也就是說,我們數(shù)倉一定要先定義設(shè)計再去開發(fā)。
        最后一層就是統(tǒng)一的使用,通過指標地圖,我們的用戶可以很清楚地知道他需要的指標在數(shù)倉的哪個地方,分析師和業(yè)務(wù)也能知道這個指標具體的定義是什么。統(tǒng)一查詢服務(wù)在提供數(shù)據(jù)服務(wù)的同時也把這個指標帶進去了,因為在模型設(shè)計的時候,會去定義字段綁定到哪個指標,通過這種關(guān)系,指標貫穿打通了從數(shù)倉到應(yīng)用層。
        所以同一個指標在應(yīng)用層,不管是數(shù)據(jù)產(chǎn)品,還是業(yè)務(wù)系統(tǒng),甚至是我們有數(shù)BI(因為BI里面也可以動態(tài)引用這個定義),在任何一個場景下面,我們看到一個指標,它就是一個定義。我們的理念是說,不讓分析師或者業(yè)務(wù)自己去開發(fā)口徑,我們口徑的計算邏輯基本上都落在DW層,是由數(shù)據(jù)開發(fā)根據(jù)指標定義統(tǒng)一開發(fā)的,應(yīng)用層更多只是篩選匯總,這就最大限度地杜絕了相同的指標在不同地方的數(shù)據(jù)結(jié)果不一樣的問題。
        數(shù)據(jù)治理:平臺、規(guī)范與考核都很重要
        這里只講數(shù)據(jù)治理的大概思路,嚴選數(shù)據(jù)治理是圍繞數(shù)倉建設(shè)開展的,利用了整個大數(shù)據(jù)平臺以及一系列的流程規(guī)范和考核優(yōu)化機制。數(shù)據(jù)治理貫穿了整個數(shù)據(jù)的生命周期,從需求的評審就開始治理。
        嚴選數(shù)據(jù)需求評審的時候,數(shù)據(jù)架構(gòu)師、分析師、數(shù)據(jù)產(chǎn)品經(jīng)理以及業(yè)務(wù)方通常都會參加。模型設(shè)計評審,數(shù)據(jù)架構(gòu)師也會嚴格把關(guān)。到了任務(wù)開發(fā),是一線的數(shù)據(jù)開發(fā)人員的責(zé)任,還有數(shù)據(jù)測試以及質(zhì)量稽核、鏈路感知這些以及任務(wù)運維問題處理,這些流程在整個有數(shù)大數(shù)據(jù)平臺里面,都是有相應(yīng)的功能去落地的。
        同時,還要定一個考核體系。嚴選核心考核的有三點,一個是跨層依賴率,這體現(xiàn)了數(shù)倉的建設(shè)水平。第二個是基線完成率,嚴選定義了很多基線,比如移動數(shù)據(jù)工作臺,領(lǐng)導(dǎo)們都是8點左右就開始看數(shù)據(jù)了,所以移動數(shù)據(jù)工作臺所有依賴的任務(wù)7:30時候一定要完成。第三個是有效響應(yīng)平均時間,是指一旦出了問題,我們能不能在業(yè)務(wù)方發(fā)現(xiàn)之前把它解決掉。
        任務(wù)需要常態(tài)優(yōu)化,為什么是任務(wù)?因為很多問題,業(yè)務(wù)最終感知到的,就是我們的數(shù)據(jù)不對,產(chǎn)出晚,核心就這兩點,比如說我們數(shù)據(jù)產(chǎn)品里面的這個指標不對,或者說今天這個時候沒產(chǎn)出,這些問題追蹤下來,最終都歸結(jié)到任務(wù)上面,所以我們會有一些常態(tài)化的優(yōu)化的機制來優(yōu)化任務(wù)。
        嚴選最近近30天的數(shù)據(jù),跨層依賴率只有0.97%,基線完成率99.92%,有效平均響應(yīng)時間是0,因為最近30天沒有什么報警,數(shù)據(jù)還是非常亮眼的。
        有了上面的方法論和平臺工具,真正在落地的時候,我們還是要去以項目的機制去做這件事情,就是專人負責(zé),量化考核。對我們來說,數(shù)據(jù)治理核心的負責(zé)團隊就是數(shù)倉團隊,因為它是圍繞數(shù)倉展開的。
        架構(gòu)師、數(shù)據(jù)開發(fā)本身有一個固定的職責(zé),是要去建設(shè)主題域,這是最核心的一部分。我們還會有很多的虛擬項目小組,針對我們所定義的數(shù)據(jù)治理的一些KPI專門負責(zé)。因為如果不這么做,我們會發(fā)現(xiàn)任務(wù)永遠都優(yōu)化不了,會經(jīng)常出問題。
        總結(jié)
        網(wǎng)易有數(shù)核心有兩個產(chǎn)品,一個是BI,一個是大數(shù)據(jù)開發(fā)及管理平臺。基于大數(shù)據(jù)開發(fā)及管理平臺,可以快速構(gòu)建數(shù)據(jù)中臺,包括數(shù)倉建設(shè)和一整套數(shù)據(jù)管理體系,并向外提供數(shù)據(jù)服務(wù)。數(shù)據(jù)服務(wù)可以為數(shù)據(jù)產(chǎn)品和業(yè)務(wù)系統(tǒng)提供數(shù)據(jù)。
        有數(shù)BI可以提供自助式的高效分析,主要用里面的報告模塊,做好的報告也可以集成到數(shù)據(jù)產(chǎn)品或者業(yè)務(wù)系統(tǒng)中。
        此外,有數(shù)BI還有一個模塊叫數(shù)據(jù)門戶,企業(yè)如果沒有嚴選那樣的研發(fā)能力去開發(fā)單獨的數(shù)據(jù)產(chǎn)品,就可以通過這個數(shù)據(jù)門戶高效交付基于報告的數(shù)據(jù)產(chǎn)品。
        作者簡介
        顧平,網(wǎng)易數(shù)帆大數(shù)據(jù)產(chǎn)品專家,7年大數(shù)據(jù)從業(yè)經(jīng)驗,2017年至2020年就職于網(wǎng)易嚴選,擔(dān)任數(shù)據(jù)產(chǎn)品負責(zé)人,從0到1構(gòu)建了網(wǎng)易嚴選的數(shù)據(jù)產(chǎn)品體系和數(shù)據(jù)中臺體系。目前就職于網(wǎng)易數(shù)帆,擔(dān)任網(wǎng)易有數(shù)·BI產(chǎn)品負責(zé)人。
        瀏覽 47
        點贊
        評論
        收藏
        分享

        手機掃一掃分享

        分享
        舉報
        評論
        圖片
        表情
        推薦
        點贊
        評論
        收藏
        分享

        手機掃一掃分享

        分享
        舉報
        1. <strong id="7actg"></strong>
        2. <table id="7actg"></table>

        3. <address id="7actg"></address>
          <address id="7actg"></address>
          1. <object id="7actg"><tt id="7actg"></tt></object>
            国产ai换脸一区二区三区 | 涩涩视频网站在线观看 | 色骚导航 | 国产成人精品无码区免费福利 | 涩涩涩涩在线观看 | 午夜成人精品一区二三区免费看 | 久久久久6| 国产破处网站 | 流氓片日本中文字幕 | 无码人妻一区二区一牛影视 |