我最近一直在研究各種途徑,以便為團隊的數(shù)據(jù)和流程提供更高級別的保證。這主要是由于數(shù)據(jù)的集成方面日益成熟,并且正在探索更多工具,例如 dbt,以從傳統(tǒng)數(shù)據(jù)堆棧中發(fā)展我們的能力。我們發(fā)現(xiàn),我們需要一種策略,以便通過正確的控制和框架更好地管理團隊從不同數(shù)據(jù)集創(chuàng)建的指標(biāo),從而建立信任并減少數(shù)據(jù)債務(wù)。
這個故事匯集了我在研究中發(fā)現(xiàn)的管理指標(biāo)的各個方面。但有一個問題,即如何在企業(yè)級別上有效地完成一些工作,而這在很大程度上取決于特定組織的數(shù)據(jù)成熟度。
一 指標(biāo)和治理需求
1.什么是指標(biāo)
指標(biāo)是從原始數(shù)據(jù)中得出的數(shù)字指標(biāo)或測量值,旨在跟蹤和量化業(yè)務(wù)績效的特定方面。它們提供了有針對性的可操作數(shù)據(jù)視圖,例如收入增長、轉(zhuǎn)化率或客戶流失率。
指標(biāo)通常是數(shù)據(jù)處理和轉(zhuǎn)換的結(jié)果,可創(chuàng)建有助于指導(dǎo)決策和戰(zhàn)略規(guī)劃的簡化視圖。
2.什么是數(shù)據(jù)產(chǎn)品
數(shù)據(jù)產(chǎn)品涵蓋向用戶提供結(jié)構(gòu)化和精選數(shù)據(jù)的整個系統(tǒng)或輸出,例如報告、儀表板、API 或數(shù)據(jù)饋送。數(shù)據(jù)產(chǎn)品是向利益相關(guān)者提供的數(shù)據(jù)、工具和資源的完整包,使他們能夠與數(shù)據(jù)交互以進行分析或決策。這些產(chǎn)品通常包括原始數(shù)據(jù)、處理后的數(shù)據(jù)和精煉數(shù)據(jù)的組合,并附帶 BI 平臺、數(shù)據(jù)目錄或提供對基礎(chǔ)數(shù)據(jù)集的訪問的 API 等工具。
雖然指標(biāo)可以解答特定的業(yè)務(wù)問題,但數(shù)據(jù)產(chǎn)品可以提供創(chuàng)建或訪問這些指標(biāo)的基礎(chǔ)數(shù)據(jù)和工具。指標(biāo)通常是大型數(shù)據(jù)產(chǎn)品的一部分,嵌入在儀表板或報告中,需要強有力的治理才能保持一致性和準(zhǔn)確性。
3.控制和治理的重要性
隨著數(shù)據(jù)量的增長,確保指標(biāo)的一致性、可靠性和透明度變得至關(guān)重要。如果沒有強大的治理框架,不同的團隊可能會創(chuàng)建相同指標(biāo)的各自版本,從而導(dǎo)致差異、低效和混亂。管理良好的指標(biāo)系統(tǒng)可確保指標(biāo)標(biāo)準(zhǔn)化、可審計并與業(yè)務(wù)目標(biāo)保持一致。這種治理對于維護數(shù)據(jù)信任和防止誤解至關(guān)重要。
二 數(shù)據(jù)債務(wù)的風(fēng)險
當(dāng)指標(biāo)管理中的不良做法不斷積累,導(dǎo)致指標(biāo)支離破碎、不一致或過時時,就會產(chǎn)生數(shù)據(jù)債務(wù)。未經(jīng)檢查的數(shù)據(jù)債務(wù)會導(dǎo)致同一指標(biāo)有多個版本,業(yè)務(wù)報告準(zhǔn)確性存在不確定性,以及對數(shù)據(jù)缺乏信任。
解決數(shù)據(jù)債務(wù)需要嚴(yán)格的治理和流程來定期審核和更新指標(biāo),防止錯誤和低效率的積累。
三 定義具有治理能力的指標(biāo)的策略
為了管理使用不同級別保證數(shù)據(jù)的多個團隊并降低數(shù)據(jù)債務(wù)的風(fēng)險,以下策略概述了如何在數(shù)據(jù)平臺內(nèi)定義和管理指標(biāo),并通過適當(dāng)?shù)淖詣踊蜆?biāo)準(zhǔn)化工具提供支持。
1.建立集中治理框架
數(shù)據(jù)治理機構(gòu):組建一個跨職能治理機構(gòu),包括來自各個團隊(業(yè)務(wù)、數(shù)據(jù)工程、分析等)的關(guān)鍵利益相關(guān)者。該小組負責(zé)定義指標(biāo)標(biāo)準(zhǔn)并監(jiān)督指標(biāo)管理。
數(shù)據(jù)保證模型:定義一個多層級的數(shù)據(jù)保證框架(例如銅牌、銀牌、金牌),根據(jù)質(zhì)量、完整性和可靠性對數(shù)據(jù)進行分類。每個類別都應(yīng)有一套明確的標(biāo)準(zhǔn)和用例,以便團隊能夠根據(jù)輸入數(shù)據(jù)的適當(dāng)保證級別構(gòu)建指標(biāo)。
2.指標(biāo)注冊和元數(shù)據(jù)管理
集中指標(biāo)定義:使用合適的存儲庫或注冊表作為所有指標(biāo)定義的真實來源。注冊表應(yīng)存儲每個指標(biāo)的明確定義、所有權(quán)、計算邏輯、保證級別和數(shù)據(jù)源。
數(shù)據(jù)沿襲和來源:確保每個指標(biāo)都與其底層數(shù)據(jù)源和轉(zhuǎn)換邏輯相鏈接,從而允許團隊追蹤指標(biāo)的得出方式。
元數(shù)據(jù)和可搜索性:確保存儲庫支持元數(shù)據(jù)標(biāo)記和全文搜索,以便用戶可以輕松地根據(jù)關(guān)鍵詞、業(yè)務(wù)領(lǐng)域或功能類別找到相關(guān)指標(biāo)。
版本控制:對指標(biāo)實施版本控制,并記錄詳細的變更歷史記錄,讓團隊能夠跟蹤隨時間推移的變更。某些工具內(nèi)置了版本控制和審計跟蹤功能,確保指標(biāo)定義的變更透明且可逆。
3.指標(biāo)保證模型
黃金標(biāo)準(zhǔn)指標(biāo)(完全數(shù)據(jù)保證):這些指標(biāo)已通過數(shù)據(jù)治理機構(gòu)的審查、驗證和認可。它們用于關(guān)鍵業(yè)務(wù)決策,并且只能建立在高度可靠的(黃金)數(shù)據(jù)上。
銀級指標(biāo)(部分保證數(shù)據(jù)):基于存在一些已知差距或潛在不一致但適合運營報告的數(shù)據(jù)構(gòu)建的指標(biāo)。應(yīng)明確標(biāo)注此類指標(biāo)。
青銅指標(biāo)(探索性/實驗性數(shù)據(jù)):仍在開發(fā)中或基于置信度較低的數(shù)據(jù)的指標(biāo)。這些指標(biāo)僅應(yīng)用于探索性或非關(guān)鍵性報告。
4.度量所有權(quán)和責(zé)任
指定指標(biāo)所有者:每個指標(biāo)都應(yīng)指定一名所有者,負責(zé)確保其準(zhǔn)確性、相關(guān)性以及與業(yè)務(wù)目標(biāo)的一致性。這有助于減少重復(fù)工作,并防止多個團隊創(chuàng)建同一指標(biāo)的沖突版本。
協(xié)作指標(biāo)開發(fā):確保團隊在開發(fā)指標(biāo)時進行協(xié)作,尤其是當(dāng)指標(biāo)跨部門或職能時??梢酝ㄟ^定期舉辦研討會來協(xié)調(diào)定義和目標(biāo)。
5.自動化和監(jiān)控
自動執(zhí)行數(shù)據(jù)質(zhì)量檢查:在數(shù)據(jù)提取和轉(zhuǎn)換的不同階段實施數(shù)據(jù)驗證檢查,以確保只有高質(zhì)量的數(shù)據(jù)才能流入您的指標(biāo)。這可能包括異常檢測、缺失數(shù)據(jù)檢查和準(zhǔn)確性閾值。
指標(biāo)審計和監(jiān)控:定期審計和監(jiān)控指標(biāo)的準(zhǔn)確性和相關(guān)性。這可確保過時或不正確的指標(biāo)不會造成數(shù)據(jù)負債,并可進行更新或棄用。
6.使用護欄進行自助分析
定義護欄:提供自助分析指南和工具,讓團隊能夠在遵守治理標(biāo)準(zhǔn)的同時創(chuàng)建自己的指標(biāo)。這可能涉及使用預(yù)定義的數(shù)據(jù)模型和共享數(shù)據(jù)集來強制一致性。
創(chuàng)建指標(biāo)模板:提供常見類型指標(biāo)(例如增長率、平均值等)的模板,團隊可以使用這些模板來加速開發(fā),同時確保遵守批準(zhǔn)的計算方法。
7.變更管理和文檔
版本控制和文檔:確保對指標(biāo)、其定義或數(shù)據(jù)源的任何更改都記錄下來、記錄下來并傳達給所有相關(guān)利益相關(guān)者。這可以減少混亂并提高透明度。
傳達數(shù)據(jù)信任級別:在報告和儀表板中清楚地說明每個數(shù)據(jù)源和指標(biāo)的保證級別,以便用戶了解他們所使用數(shù)據(jù)的可靠性。
8.可見性和易訪問性
為了使指標(biāo)在各個團隊中都發(fā)揮作用,它們必須易于訪問且透明。以下是如何在保持治理的同時確保指標(biāo)的可見性。
9.用戶友好界面和集成
自助服務(wù)儀表板:將指標(biāo)注冊表集成到流行的 BI 和分析平臺(如 Tableau)。這樣,用戶就可以將預(yù)定義、經(jīng)過驗證的指標(biāo)直接拉入儀表板。
預(yù)建指標(biāo)模板:為常用指標(biāo)提供可重復(fù)使用的模板和小部件,允許用戶使用標(biāo)準(zhǔn)化、受管理的指標(biāo)快速構(gòu)建儀表板。
API 訪問:提供允許以編程方式訪問指標(biāo)的 API,使團隊能夠?qū)⒅笜?biāo)集成到自定義報告或應(yīng)用程序中。
10.用戶友好界面
業(yè)務(wù)詞匯表:在指標(biāo)注冊表中附加業(yè)務(wù)詞匯表,以業(yè)務(wù)用戶可以理解的方式提供指標(biāo)的非技術(shù)定義。
數(shù)據(jù)探索門戶:創(chuàng)建一個直觀的 Web 門戶或儀表板,用戶可以在其中探索指標(biāo)、深入了解詳細信息并查看相關(guān)文檔和沿襲信息。
工具提示和上下文信息:在 BI 工具或數(shù)據(jù)平臺中,包含指標(biāo)的工具提示或彈出定義,當(dāng)用戶將鼠標(biāo)懸停在指標(biāo)名稱上時提供快速解釋。
11.清晰的治理和基于角色的訪問
基于角色的訪問:根據(jù)角色控制對指標(biāo)的訪問,確保用戶只能看到與其工作相關(guān)的指標(biāo),并且只有授權(quán)用戶才能創(chuàng)建或修改特定指標(biāo)。
審批工作流程:設(shè)置工作流程,讓數(shù)據(jù)管理員或治理團隊審核和批準(zhǔn)新的或修改后的指標(biāo),然后才能廣泛發(fā)布。這可確保只有經(jīng)過驗證的準(zhǔn)確指標(biāo)才能被更廣泛的受眾看到。
12.視覺層次和分組
按領(lǐng)域或業(yè)務(wù)功能組織指標(biāo):按業(yè)務(wù)領(lǐng)域或功能(例如財務(wù)、銷售、運營)對指標(biāo)進行分組,以便于查找。它們還可以按報告目的進行分類,例如 KPI、運營指標(biāo)、探索性指標(biāo)。
指標(biāo)標(biāo)簽和標(biāo)記:使用標(biāo)簽和標(biāo)記幫助用戶識別和確定關(guān)鍵指標(biāo)的優(yōu)先順序,例如“關(guān)鍵 KPI”、“執(zhí)行報告”或“臨時分析”。
13.教育和培訓(xùn)
用戶培訓(xùn)和入職:提供定期培訓(xùn)課程,以確保用戶知道如何訪問和解釋指標(biāo),特別是對于新員工或具有不同數(shù)據(jù)素養(yǎng)水平的團隊。
文檔和指南:創(chuàng)建全面的文檔和用戶指南,解釋如何訪問指標(biāo)存儲庫、如何解釋特定指標(biāo)以及如何在儀表板或分析中使用它們。
14.持續(xù)的反饋和溝通
通知系統(tǒng):使用通知系統(tǒng)在關(guān)鍵指標(biāo)更新或更改時提醒利益相關(guān)者。這可確保每個人都了解情況并避免對數(shù)據(jù)的誤解。
跟蹤指標(biāo)債務(wù):實施系統(tǒng)來跟蹤需要改進或由于業(yè)務(wù)需求不斷發(fā)展而變得過時的指標(biāo)。應(yīng)在未來治理周期中優(yōu)先考慮這些指標(biāo),以防止數(shù)據(jù)債務(wù)不斷增加。
反饋循環(huán):實施反饋機制,用戶可以請求新指標(biāo)或報告現(xiàn)有指標(biāo)的問題,例如數(shù)據(jù)準(zhǔn)確性、實用性或差距。這種反饋應(yīng)納入治理流程,以不斷提高指標(biāo)的質(zhì)量和相關(guān)性。
四 小結(jié)
將集中式治理框架與靈活的指標(biāo)訪問相結(jié)合,可確保組織避免數(shù)據(jù)負債并保持一致、可靠的報告。通過使用適當(dāng)?shù)墓ぞ吆涂蚣埽M織可以自動化和強制執(zhí)行指標(biāo)定義,確保單一事實來源,同時使團隊能夠在預(yù)定義的規(guī)則內(nèi)自主工作。
無論指標(biāo)最終是采用集中管理還是以更分散的方式進行管理,強大的治理和易于訪問可確保數(shù)據(jù)仍然是整個組織值得信賴的資產(chǎn)。
部分內(nèi)容來源于互聯(lián)網(wǎng),如有侵權(quán),請聯(lián)系客服刪除處理。