(資料圖片)

網(wǎng)易云音樂(lè)開源了曙光埋點(diǎn) dawn

K8s+gRPC云原生微服務(wù)開發(fā)與治理實(shí)戰(zhàn)

download：https://www.zxit666.com/5859/

一個(gè)跨多端的全鏈路埋點(diǎn)處理計(jì)劃，旨在結(jié)構(gòu)一個(gè)圓滿的數(shù)據(jù)理想國(guó)。曙光埋點(diǎn)發(fā)明性的提出了埋點(diǎn)虛擬樹（VTree），并在此根底上完成了諸多才能，處理大前端側(cè)埋點(diǎn)艱難、精度差、不穩(wěn)定、質(zhì)量不高的問(wèn)題，并且設(shè)計(jì)一套完好的端側(cè)全鏈路追蹤才能，圓滿助力大數(shù)據(jù)用戶畫像、實(shí)時(shí)歸因/離線歸因剖析、漏斗剖析、大數(shù)據(jù)引薦場(chǎng)景。曙光埋點(diǎn)從埋點(diǎn)設(shè)計(jì)、到大前端(iOS、Android、H5、RN等)開發(fā)、以及埋點(diǎn)校驗(yàn)&稽查、再到埋點(diǎn)數(shù)據(jù)運(yùn)用的全鏈路效勞，讓客戶端的埋點(diǎn)變得真正的好用。目前曾經(jīng)普遍應(yīng)用于云音樂(lè)各個(gè)主要APP。行業(yè)難點(diǎn)&痛點(diǎn)埋點(diǎn)開發(fā)本錢高：端側(cè)埋點(diǎn)開發(fā)，常常是逐一坑位停止，坑位上大量且反復(fù)的參數(shù)，開發(fā)本錢昂揚(yáng)；埋點(diǎn)精準(zhǔn)度低：資源曝光埋點(diǎn)，復(fù)雜度高且準(zhǔn)確低，短少全站統(tǒng)一的曝光戰(zhàn)略；埋點(diǎn)模型不穩(wěn)定：mspm以及x-path方式的埋點(diǎn)，單獨(dú)坑位以及自動(dòng)坑位計(jì)劃，很難保證埋點(diǎn)模型的穩(wěn)定；鏈路追蹤才能弱：端側(cè)沒有鏈路追蹤才能，常常需求借助數(shù)據(jù)側(cè)對(duì)離線數(shù)據(jù)停止復(fù)雜剖析得來(lái)，本錢高；埋點(diǎn)質(zhì)量管控難：從設(shè)計(jì)、開發(fā)，再到考證、以及上線，QA人力來(lái)保證本錢大、收益小。特征高性能虛擬樹：曙光埋點(diǎn)提出了埋點(diǎn)對(duì)象和虛擬樹（后面稱VTree），view聲明成一個(gè)對(duì)象，原始view樹高性能的導(dǎo)出一顆VTree，VTree構(gòu)建了我們整個(gè)曙光埋點(diǎn)計(jì)劃的基石；埋點(diǎn)內(nèi)容構(gòu)造化：借助于VTree，我們的埋點(diǎn)內(nèi)容是構(gòu)造化的，是具備自我描繪才能的，自然具備了上下層級(jí)關(guān)系，繼而做到埋點(diǎn)內(nèi)容承載坑位、內(nèi)容、上下層級(jí)關(guān)系，從而得出有意義的、穩(wěn)定的spm（Super Position Model）以及scm（Super Content Model）；全站統(tǒng)一的曝光戰(zhàn)略：跨多端統(tǒng)一的資源曝光戰(zhàn)略，做到所見即曝光開端，不可見即曝光完畢，大大減輕了開發(fā)人員的開發(fā)本錢和出錯(cuò)幾率；全鏈路追蹤才能： 端側(cè)強(qiáng)大的鏈路追蹤才能，100%可追蹤用戶日志的操作鏈路關(guān)系，圓滿助力大數(shù)據(jù)實(shí)時(shí)歸因剖析、離線歸因剖析、漏斗剖析、大數(shù)據(jù)引薦場(chǎng)景，做到不限深度，不限廣度的數(shù)據(jù)剖析才能；完好的埋點(diǎn)迭代管理：強(qiáng)大的埋點(diǎn)迭代管理平臺(tái)，特地承載互聯(lián)網(wǎng)app快速迭代場(chǎng)景，完好管理歷史記載和多版本并行；多機(jī)制的埋點(diǎn)質(zhì)量保證：線下埋點(diǎn)校驗(yàn)做到開發(fā)埋點(diǎn)免去了QA人力，同時(shí)保證了埋點(diǎn)上線質(zhì)量；線上數(shù)據(jù)稽查保證以全自動(dòng)的方式發(fā)現(xiàn)線上埋點(diǎn)問(wèn)題；全平臺(tái)掩蓋：掩蓋iOS、Android、RN、以及站外內(nèi)H5，而且極易的可擴(kuò)展Flutter、weex等其他平臺(tái)。更多信息能夠參見文章 云音樂(lè)曙光埋點(diǎn)：復(fù)原數(shù)據(jù)理想國(guó)

運(yùn)用曙光曙光埋點(diǎn)掩蓋了iOS、Android、H5、RN，以及埋點(diǎn)管理平臺(tái)（easyinsight平臺(tái)），BI剖析師在埋點(diǎn)平臺(tái)設(shè)計(jì)埋點(diǎn)VTree，端側(cè)開發(fā)人員以極低的開發(fā)本錢、聲明式的開發(fā)方式導(dǎo)出VTree，分離easyinsight平臺(tái)的上線前埋點(diǎn)校驗(yàn)以及線上數(shù)據(jù)稽查，即進(jìn)步了開發(fā)效率，又保證了埋點(diǎn)質(zhì)量。愈加細(xì)致的曙光埋點(diǎn)運(yùn)用，參見 曙光埋點(diǎn)-文檔行業(yè)比照曙光 與 x-path系列x-path系列方式的埋點(diǎn)，比擬有代表性的是Mixpanel(游戲)、GrowingIO、網(wǎng)易HubbleData、以及美團(tuán)，主要特性是強(qiáng)化無(wú)痕埋點(diǎn)，埋點(diǎn)坑位后關(guān)聯(lián)，數(shù)據(jù)后處置；適用的場(chǎng)景主要是一些UI復(fù)雜度低，比擬固定的場(chǎng)景，這樣能夠使得從view原始樹生成x-path，用來(lái)獨(dú)一標(biāo)識(shí)一個(gè)埋點(diǎn)坑位變得可行。比方典型運(yùn)用場(chǎng)景是按鈕的點(diǎn)擊、頁(yè)面的曝光等場(chǎng)景，對(duì)高精度的資源位曝光有些無(wú)力。其中美團(tuán)在自有動(dòng)態(tài)化計(jì)劃業(yè)務(wù)場(chǎng)景做可視化埋點(diǎn)，曙光目前也在H5活動(dòng)場(chǎng)景支持可視化埋點(diǎn)。但是缺陷也很明顯，就是不適用復(fù)雜業(yè)務(wù)場(chǎng)景，埋點(diǎn)模型不穩(wěn)定，關(guān)于埋點(diǎn)質(zhì)量請(qǐng)求特別高的業(yè)務(wù)來(lái)說(shuō)無(wú)法運(yùn)用該計(jì)劃。埋點(diǎn)坑位后關(guān)聯(lián)，數(shù)據(jù)后處置，本錢也很大，運(yùn)用也諸多不便。功用曙光x-path系列VTree可視化支持（貫串全流程）無(wú)可視化埋點(diǎn)支持H5支持（美團(tuán)）埋點(diǎn)內(nèi)容構(gòu)造化層級(jí)化 & 可高度定制平鋪（參數(shù)冗余、信息量少）埋點(diǎn)模型穩(wěn)定(spm&scm)高度穩(wěn)定低（后關(guān)聯(lián)）端側(cè)開發(fā)本錢普通（聲明式）低全鏈路鏈路追蹤強(qiáng)大（統(tǒng)一范式）普通（依托大數(shù)據(jù)后處置）全平臺(tái)統(tǒng)一的曝光戰(zhàn)略抹平列表&非列表；全平臺(tái)統(tǒng)一；弱化曝光埋點(diǎn)埋點(diǎn)校驗(yàn)&數(shù)據(jù)稽查強(qiáng)大（可視化校驗(yàn) & 線上稽查）弱曙光 與 坑位mspm系列坑位mspm系列的埋點(diǎn)計(jì)劃，是目前行業(yè)內(nèi)大多數(shù)公司采用的計(jì)劃，比方騰訊、字節(jié)、快手、美團(tuán)、以及早期的云音樂(lè)；該計(jì)劃埋點(diǎn)坑位獨(dú)立，常常經(jīng)過(guò)機(jī)器生成的 mspm 字符串來(lái)標(biāo)識(shí)埋點(diǎn)坑位，但是通常mspm都是無(wú)意義的字符串。這個(gè)計(jì)劃可靈敏順應(yīng)各種復(fù)雜業(yè)務(wù)場(chǎng)景，并且依托大公司強(qiáng)大的大數(shù)據(jù)才能，也能夠完成很不錯(cuò)的漏斗剖析、數(shù)據(jù)歸因等才能。但是客戶端開發(fā)/維護(hù)本錢高，特別是資源位曝光埋點(diǎn)，做不到端內(nèi)列表、非列表戰(zhàn)略統(tǒng)一，更做不到全平臺(tái)戰(zhàn)略統(tǒng)一，完成起來(lái)又比擬艱難，這也是最容易產(chǎn)生bug的中央。由于端側(cè)不參與鏈路追蹤，準(zhǔn)確歸因才能大數(shù)據(jù)側(cè)比擬艱難，沒有統(tǒng)一范式來(lái)統(tǒng)一處置。

功用曙光x-path系列VTree可視化支持（貫串全流程）無(wú)埋點(diǎn)內(nèi)容構(gòu)造化層級(jí)化 & 可高度定制平鋪（參數(shù)冗余、信息量少）端側(cè)開發(fā)本錢普通（聲明式）低全鏈路鏈路追蹤強(qiáng)大（統(tǒng)一范式）普通（依托大數(shù)據(jù)后處置）全平臺(tái)統(tǒng)一的曝光戰(zhàn)略抹平列表&非列表；全平臺(tái)統(tǒng)一；弱化曝光埋點(diǎn)曝光埋點(diǎn)高精度高精度（處置遮擋）弱埋點(diǎn)校驗(yàn)&數(shù)據(jù)稽查強(qiáng)大（可視化校驗(yàn) & 線上稽查）弱曙光 與 四段式spm四段式spm是在坑位mspm系列的根底上，賦予spm層級(jí)關(guān)系（站點(diǎn).頁(yè)面.區(qū)塊.區(qū)塊內(nèi)）信息，阿里大量運(yùn)用該計(jì)劃，早期云音樂(lè)也做過(guò)這方面的嘗試；該計(jì)劃讓埋點(diǎn)坑位有一定的意義，在埋點(diǎn)管理過(guò)程中也愈加便當(dāng)一些。但是四段式也就限定了方式，靈敏度降低，也短少端側(cè)明白的VTree構(gòu)造，關(guān)于埋點(diǎn)穩(wěn)定性、埋點(diǎn)校驗(yàn)/數(shù)據(jù)稽查、埋點(diǎn)內(nèi)容構(gòu)造化，都有一些才能局限。功用曙光x-path系列VTree可視化支持（貫串全流程）無(wú)埋點(diǎn)迭代管理可視化、適用迭代并行普通埋點(diǎn)內(nèi)容構(gòu)造化層級(jí)化 & 可高度定制平鋪（參數(shù)冗余、信息量少）端側(cè)開發(fā)本錢普通（聲明式）低全鏈路鏈路追蹤強(qiáng)大（統(tǒng)一范式）普通（依托大數(shù)據(jù)后處置）全平臺(tái)統(tǒng)一的曝光戰(zhàn)略抹平列表&非列表；全平臺(tái)統(tǒng)一；弱化曝光埋點(diǎn)曝光埋點(diǎn)高精度高精度（處置遮擋）弱埋點(diǎn)校驗(yàn)&數(shù)據(jù)稽查強(qiáng)大（可視化校驗(yàn) & 線上稽查）弱云音樂(lè)落地由于曙光埋點(diǎn)能夠帶來(lái)的這些益處，截止到目前為止，云音樂(lè)APP曾經(jīng)全面擁抱曙光，掩蓋簡(jiǎn)直全部的P0/P1業(yè)務(wù)場(chǎng)景，從雙端客戶端、H5、RN等，到數(shù)倉(cāng)、大數(shù)據(jù)引薦等，曾經(jīng)全數(shù)切換到曙光。依托于穩(wěn)定的VTree構(gòu)造，以及強(qiáng)大的埋點(diǎn)校驗(yàn)&埋點(diǎn)數(shù)據(jù)稽查，QA人力已完整釋放，數(shù)據(jù)相關(guān)Bug也大幅降落，曾經(jīng)很長(zhǎng)時(shí)間沒有呈現(xiàn)過(guò)由于資源曝光不準(zhǔn)確而招致的數(shù)據(jù)問(wèn)題了。

關(guān)鍵詞