發(fā)布時間:2022-11-21 09:49:56 環(huán)球時報
關(guān)注中物聯(lián)
在數(shù)據(jù)治理中,數(shù)據(jù)指標(biāo)一般都是業(yè)務(wù)中最基礎(chǔ)的分析內(nèi)容,但是業(yè)務(wù)不斷地快速發(fā)展迭代,指標(biāo)管理上就會出現(xiàn)很多問題。所以在數(shù)據(jù)治理中指標(biāo)系統(tǒng)的管理也是其中必要的一環(huán)。
01
為什么要有指標(biāo)管理
要回答這一問題,先來看一下在指標(biāo)管理中經(jīng)常會遇到的問題有那些:
1. 相同名字邏輯不同
指標(biāo)名稱相同,統(tǒng)計口徑不一致,缺少命名規(guī)范限制。
不同業(yè)務(wù)僅從自己部門出發(fā),缺少全局視角,如財務(wù)口徑的營收要嚴(yán)格按照嚴(yán)謹(jǐn)?shù)倪壿嬘嬎銓?shí)收實(shí)付的每一分錢,而產(chǎn)品/運(yùn)營端則更多考慮轉(zhuǎn)化效果,但在各自的KPI監(jiān)控報表中,都把指標(biāo)命名為營收。
2. 相同邏輯名字不同
指標(biāo)統(tǒng)一邏輯一致,但不同產(chǎn)品命名不一致,不同階段、或不同業(yè)務(wù)方/產(chǎn)品經(jīng)理對指標(biāo)命名不同,導(dǎo)致在不同數(shù)據(jù)產(chǎn)品頁面,同一指標(biāo)不同名。
3. 口徑不清晰
只是同義詞再復(fù)述一遍,如活躍用戶數(shù):訪問用戶數(shù)。
4. 命名難理解
表意不清模棱兩可,或過于專業(yè)化僅指標(biāo)創(chuàng)建人才可以懂。例如轉(zhuǎn)化率指標(biāo),有創(chuàng)單轉(zhuǎn)化率、成單轉(zhuǎn)化率,直接叫轉(zhuǎn)化率可讀性就非常差。
5. 邏輯不準(zhǔn)確
指標(biāo)口徑描述有誤,例如UV指標(biāo),口徑描述為“按照設(shè)備ID去重”,實(shí)際上不同平臺去重邏輯并不一致,如微信小程序按照UnionID去重、APP按照DeviceID去重,PC和H5按照loginkey去重。
6. 數(shù)據(jù)難追溯
數(shù)據(jù)產(chǎn)品指標(biāo)數(shù)據(jù)來源缺少直觀的鏈路追蹤能力,指標(biāo)數(shù)據(jù)異常問題排查通過翻代碼去看數(shù)據(jù)來源,路徑長、耗時久,早上業(yè)務(wù)反饋指標(biāo)問題,排查出結(jié)論后可能一上午就過去了。
7. 數(shù)據(jù)質(zhì)量差
指標(biāo)管理常見的問題綜合在一起,往往會導(dǎo)致業(yè)務(wù)對數(shù)據(jù)指標(biāo)的信任度大打折扣,發(fā)現(xiàn)數(shù)據(jù)波動后,第一反應(yīng)是先和數(shù)據(jù)部門確認(rèn)數(shù)據(jù)是不是有問題,而不是去考慮業(yè)務(wù)上有何變動。
02
指標(biāo)的組成
數(shù)據(jù)域
指面向業(yè)務(wù)分析,將業(yè)務(wù)過程或者維度進(jìn)行抽象的集合。其中,業(yè)務(wù)過程可以概括為一個個不拆分的行為事件,在業(yè)務(wù)過程之下,可以定義指標(biāo);維度,是度量的環(huán)境,如顧客下單事件,訂單類型是維度。為了保障整個體系的生命力,數(shù)據(jù)域是需要抽象提煉,并且長期維護(hù)更新的,變動需執(zhí)行變更流程。
業(yè)務(wù)過程
指公司的業(yè)務(wù)活動事件,如加購、支付都是業(yè)務(wù)過程。其中,業(yè)務(wù)過程不可拆分。
時間周期
用來明確統(tǒng)計的時間范圍或者時間點(diǎn),如最近30天、自然周、截止當(dāng)日等。
修飾類型
是對修飾詞的一種抽象劃分。修飾類型從屬于某個業(yè)務(wù)域,如日志域的訪問終端類型涵蓋APP端、PC端等修飾詞。
修飾詞
指的是統(tǒng)計維度以外指標(biāo)的業(yè)務(wù)場景限定抽象,修飾詞屬于一種修飾類型,如在日志域的訪問終端類型下,有修飾詞APP、PC端等。
度量/原子指標(biāo)
原子指標(biāo)和度量含義相同,基于某一業(yè)務(wù)事件行為下的度量,是業(yè)務(wù)定義中不可再拆分的指標(biāo),具有明確業(yè)務(wù)含義的名稱,如支付金額。
維度
維度是度量的環(huán)境,用來反映業(yè)務(wù)的一類屬性,這類屬性的集合構(gòu)成一個維度,也可以稱為實(shí)體對象。維度屬于一個數(shù)據(jù)域,如地理維度(其中包括國家、地區(qū)、省市等)、時間維度(其中包括年、季、月、周、日等級別內(nèi)容)。
維度屬性
維度屬性隸屬于一個維度,如地理維度里面的國家名稱、國家ID、省份名稱等都屬于維度屬性。
指標(biāo)分類主要分為**原子指標(biāo)、派生指標(biāo)、衍生指標(biāo)**
1. **原子指標(biāo)** 基于某一業(yè)務(wù)事件行為下的度量,是業(yè)務(wù)定義中不可再拆分的指標(biāo),具有明確業(yè)務(wù)含義的名稱,如呼單量、交易金額
2. **派生指標(biāo)** 是1個原子指標(biāo)+多個修飾詞(可選)+時間周期,是原子指標(biāo)業(yè)務(wù)統(tǒng)計范圍的圈定。派生指標(biāo)又分以下二種類型:
1. 事務(wù)型指標(biāo):
是指對業(yè)務(wù)過程進(jìn)行衡量的指標(biāo)。例如,呼單量、訂單支付金額,這類指標(biāo)需要維護(hù)原子指標(biāo)以及修飾詞,在此基礎(chǔ)上創(chuàng)建派生指標(biāo)。
2. 存量型指標(biāo):
是指對實(shí)體對象(如司機(jī)、乘客)某些狀態(tài)的統(tǒng)計,例如注冊司機(jī)總數(shù)、注冊乘客總數(shù),這類指標(biāo)需要維護(hù)原子指標(biāo)以及修飾詞,在此基礎(chǔ)上創(chuàng)建派生指標(biāo),對應(yīng)的時間周期一般為“歷史截止當(dāng)前某個時間”。
**衍生指標(biāo)**是在事務(wù)性指標(biāo)和存量型指標(biāo)的基礎(chǔ)上復(fù)合成的。主要有比率型、比例型、統(tǒng)計型均值
03
指標(biāo)管理如何做
指標(biāo)化管理的概念很多年前就存在,各個互聯(lián)網(wǎng)公司都在建設(shè)自己的管理平臺,學(xué)習(xí)了很多關(guān)于指標(biāo)管理系統(tǒng)建設(shè)的文章會發(fā)現(xiàn),做的事情大同小異。主要是圍繞指標(biāo)管理的痛點(diǎn)問題,以阿里的OneData理論為方法論依據(jù),相同的事情只要做一遍,剩下的是提供產(chǎn)品化的解決方案,讓指標(biāo)建設(shè)、指標(biāo)復(fù)用更加的規(guī)范和高效。
主要包括:
1)建立指標(biāo)生產(chǎn)協(xié)同機(jī)制,指標(biāo)的誕生要經(jīng)過需求申請、審核、數(shù)據(jù)開發(fā)、上線應(yīng)用流程,收口指標(biāo)創(chuàng)建過程,避免指標(biāo)建設(shè)的隨意性帶來的“污染”。
2)制定指標(biāo)命名、口徑說明規(guī)范,按照原子指標(biāo)+業(yè)務(wù)限定+統(tǒng)計維度的方式,將規(guī)則集成到平臺內(nèi),通過系統(tǒng)規(guī)則來把控指標(biāo)輸出。
3)指標(biāo)字典線上化,解決線下文檔(excel)管理指標(biāo)存在的共享難、更新不及時、權(quán)限管控缺失等問題。
4)指標(biāo)數(shù)據(jù)邏輯綁定,即除了維護(hù)指標(biāo)的業(yè)務(wù)元數(shù)據(jù)外,還要建立指標(biāo)的技術(shù)元數(shù)據(jù),指標(biāo)數(shù)據(jù)從哪個模型、哪個字段、何種計算邏輯得到。
5)指標(biāo)輸出,指標(biāo)管理最大的價值還是為數(shù)據(jù)產(chǎn)品提供數(shù)據(jù)輸出,將Hive層模型同步到MySQL、Greenplumn、Kylin、CK等查詢性能更優(yōu)可以秒級響應(yīng)的查詢引擎,通過接口調(diào)用JDBC連接方式直接獲取數(shù)據(jù)。
而實(shí)現(xiàn)這些是需要一個完整指標(biāo)管理系統(tǒng),來保證對應(yīng)的規(guī)則要求落實(shí)到位。例如需要有權(quán)限管理,來限制不同的用戶有哪些指標(biāo)的查看權(quán)限,指標(biāo)的審批流程在定義一個指標(biāo)邏輯計算口徑中需要指定負(fù)責(zé)人和審批人統(tǒng)一負(fù)責(zé)這個指標(biāo)的規(guī)范。同時具有指標(biāo)的快速檢索功能,方便在定義指標(biāo)或者查看已有指標(biāo)時快速定位。
04
指標(biāo)管理的作用
1.提高溝通效率,減少存在相同邏輯不同命名的問題,在同一認(rèn)知維度進(jìn)行溝通
2.統(tǒng)計口徑收斂在一起統(tǒng)一管理,指標(biāo)真確性提高
3.指標(biāo)負(fù)責(zé)到人,有問題可以直接找到對接人,快速地解決問題。
4.對數(shù)據(jù)安全和權(quán)限的把控將會更加精細(xì)化,資源的管理也更加規(guī)范,在一定程度上會提升業(yè)務(wù)指標(biāo)開發(fā)的成本。
05
寫在最后的話
指標(biāo)管理平臺是可以幫助企業(yè)進(jìn)行指標(biāo)規(guī)范化管理的有效工具,但規(guī)范化帶來的犧牲就是流程的冗長和效率問題。
每個階段都有每個階段要發(fā)展的東西,不要想著一步到位,很可能會得不償失。小公司需要要考慮的就是效率生存問題,而大公司就要考慮流程規(guī)范,相對于小公司大公司更多考慮公司的穩(wěn)定正常運(yùn)轉(zhuǎn)。但是沒有一個指標(biāo)管理系統(tǒng)也要在一定程度上人為去規(guī)范指標(biāo)的開發(fā),維護(hù)好指標(biāo)的計算口徑和取數(shù)邏輯。
相關(guān)閱讀
- 泰德煤網(wǎng)股份有限公司:基于供應(yīng)鏈管理的泰德煤網(wǎng)煤炭業(yè)務(wù)運(yùn)營信息化平臺
- 鞍鋼:應(yīng)用《GB/T 25103-2010 供應(yīng)鏈管理業(yè)務(wù)參考模型》開發(fā)并實(shí)施鋼企鐵運(yùn)數(shù)智化供應(yīng)鏈系統(tǒng)案例
- 帆軟交通物流行業(yè)顧問楊鵬:交通物流業(yè)的數(shù)據(jù)管理進(jìn)化
- 江蘇金馬云:基于大數(shù)據(jù)的港航云物流管理平臺建設(shè)
- 中國移動通信集團(tuán)廣東有限公司:大數(shù)據(jù)肖像刻畫在通信物資精細(xì)化管理中的應(yīng)用
每日 推薦
- 張國清在貴州、重慶調(diào)研時強(qiáng)調(diào):加快制造業(yè)數(shù)智化轉(zhuǎn)型升級 扎實(shí)推進(jìn)國有企業(yè)創(chuàng)新發(fā)展
- 何立峰在湖北、湖南調(diào)研時強(qiáng)調(diào):持續(xù)推動外貿(mào)提質(zhì)增效 打通全國統(tǒng)一大市場建設(shè)卡點(diǎn)堵點(diǎn)
- 丁薛祥出席第二屆中歐班列國際合作論壇開幕式并致辭
- 工信部:到2027年建成200個左右高標(biāo)準(zhǔn)數(shù)字園區(qū)
- 四川年內(nèi)實(shí)現(xiàn)普貨車輛智能年審
- 長三角有色金屬產(chǎn)業(yè)規(guī)劃建設(shè)統(tǒng)一大市場
- 我國快遞包裹市場規(guī)模連續(xù)11年全球第一
- 《中歐班列發(fā)展報告(2025)》發(fā)布:有力保障國際產(chǎn)業(yè)鏈供應(yīng)鏈穩(wěn)定
- 力挺專精特新中小企業(yè) 更多政策舉措加快制定——將深入開展夯基提質(zhì)行動 探索建設(shè)賦能中心
- 國家郵政局公布2025年10月份郵政行業(yè)運(yùn)行情況
- 國際綠色燃料聯(lián)盟在香港成立
