如何成功實施一個數據治理項目?實施步驟有哪些?

来源:https://www.cnblogs.com/DTinsight/archive/2023/06/13/17478342.html
-Advertisement-
Play Games

企業數字化轉型以數據為中心,通過數據驅動業務發展、管理協同和運營。因此,數字化轉型關鍵在於數據,數據治理則需先行。從而更好激發數據生產要素潛能,實現業務數據化、數據價值化,助力企業數字化轉型。 ## 那麼何為數據治理? 國際數據管理協會(DAMA)在其《DAMA數據管理知識體系指南(第2版)》一書中 ...


企業數字化轉型以數據為中心,通過數據驅動業務發展、管理協同和運營。因此,數字化轉型關鍵在於數據,數據治理則需先行。從而更好激發數據生產要素潛能,實現業務數據化、數據價值化,助力企業數字化轉型。

那麼何為數據治理?

國際數據管理協會(DAMA)在其《DAMA數據管理知識體系指南(第2版)》一書中將數據治理進行了定義,即數據治理是對數據資產管理行使權力、控制和共用決策(規劃、監測和執行)的系列活動。此外,DAMA還將數據治理作為數據管理十大知識領域的中心,負責知識領域的平衡和一致性。
file

DAMA提到數據治理的目標有三點:提升企業數據資產管理能力;定義、批准、溝通和實施數據管理的原則、政策、程式、指標、工具和責任;監控和指導政策合規性、數據使用和管理活動。

可以看出,DAMA給出了比較全面的解釋,但是距離企業可落地的數據治理還是距離較遠,更像是綱領性的介紹,因此對於如何進行數據標準的制定以及如何進行數據資產的評估都缺少具體的描述。

2020年,信通院牽頭制定數據治理服務商成熟度模型(DGS),這一評估模型填補了數據治理服務領域的空白。模型以數據治理服務項目實施運維的流程為主線,融合數據治理核心能力,包括6大能力域、21個能力項,其中6大能力域遵循一般性數據治理項目流程,具體如下:

1.需求管理能力域:提供方通過採集需求方的業務需求、數據需求、技術需求等,明確數據治理目標和範圍,並評估實施數據治理可行性;

2.資源評估能力域:提供方通過對數據來源、數據規模、數據分類、數據關係、數據時效性、專業軟體工具、存儲計算環境以及硬體資源等主要影響因素進行分析,以提升數據治理項目任務分解的準確性,指導識別項目中的潛在風險;

3.實施保障能力域:提供方通過制定實施規劃,建立組織保障,開展風險管理,確保數據治理項目的順利實施,降低風險和成本;

4.方案設計能力域是數據治理項目的核心環節,提供方通過制定相關規範體系和設計文檔,形成滿足甲方需求的數據治理體系;

5.方案實施能力域提供方通過依托相關平臺工具,實現方案的落地;

6.成果交付能力域包括試運行、成果驗收2個能力項。
file

當前企業對於數據治理服務的關註點已逐漸從平臺產品擴展至方案設計、實施交付、持續運營的全訪問服務體系。專業的團隊,是項目成功的關鍵,依托於專業的數據治理服務團隊和知識沉澱,開展項目實施工作。

數據治理組織建議

首先CIO或CDO是項目順利進行的關鍵角色,可以更高效地推動實施團隊與業務的融合。其次是項目的項目經理,負責項目的管理和資源調度,各階段人員及工作安排,項目計劃制定、進度控制、項目風險管理、項目質量把關等;技術負責人、系統架構師、項目管理專員是項目團隊的智囊團和質量保障;根據項目需求,安排不同崗位職能人員開展實施及售後工作,包括但不限於業務架構師、業務分析師、數據架構師、數據開發工程師、測試工程師、技術支持、運維工程師、產品專家、產品經理、客戶成功專員等。

file

數據治理步驟

項目交付主要分為4個步驟,以需求調研為切入點,以方案設計為規劃核心,以開發實施為交付重點,以上線運維為服務保障,依次穩步開展保證項目的順利實施。

第一步是需求調研:通過業務調研切入,以收集資料和訪談調研為抓手,瞭解業務流程和痛點,深挖根本原因。以數據調研作為後續方案設計的開端,結合業務調研的痛點與根本原因,瞭解數據系統的現狀後,以數據角度切入整體解決方案。

第二步是方案設計:以數據標準方案為基石,以場景規劃方案為需求原點,以數據架構方案為綱領,進行整個數據治理方案設計;以實際需求為主,形成規範的組織架構、管理制度,參考國標及行標,形成數據標準方案,為後續實施打下堅實基礎;通過需求調研整理客戶實施的場景範圍,輸出原型設計及指標清單,確認後輸出場景規劃文檔,以此確定整體需求範圍;根據整體需求範圍和數據系統現狀,搭建數據架構,劃分業務域及數據域,規劃後續開發實施的整體框架。

第三步是開發實施:確定整體方案後,進行產品部署、數據探查、數據同步工作,根據場景規劃和架構設計方案,遵循數據標準方案,進行數據開發與數據治理。

第四步是上線運維:整體開發完成後進行試運行,同步開展產品測試工作,均通過後進行產品驗收及正式上線,後續由運維部門進行巡檢及售後工作。

file

DGS對數據治理的方方面面進行瞭解釋,給出了模型規範和評估標準。對於企業來說,不管是想自己做數據治理,還是通過服務商來實現部分數據治理工作,DGS都提供了一套相對全面的參考指南。

目前,袋鼠雲已通過DGS三級評估。整體來看,目前數據治理提供商的數據工程服務能力優勢集中於數據資源評估、數據質量、數據標準等能力項。
file

《數棧產品白皮書》:https://www.dtstack.com/resources/1004?src=szsm

《數據治理行業實踐白皮書》下載地址:https://www.dtstack.com/resources/1001?src=szsm

想瞭解或咨詢更多有關袋鼠雲大數據產品、行業解決方案、客戶案例的朋友,瀏覽袋鼠雲官網:https://www.dtstack.com/?src=szbky

同時,歡迎對大數據開源項目有興趣的同學加入「袋鼠雲開源框架釘釘技術qun」,交流最新開源技術信息,qun號碼:30537511,項目地址:https://github.com/DTStack


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 目錄 一、入侵檢測系統 二、防火牆 三、防水牆 四、tcpdump抓包 五、實驗演示 1.SNAT 一、入侵檢測系統 特點:是不阻斷任何網路訪問,量化、定位來自內外網路的威脅情況, 主要以提供報警和事後監督為主,提供有針對性的指導措施和安全決策依據,類似於監控系統 二、防火牆 1.特點:隔離功能,工 ...
  • ## Core Dump 是什麼? Core Dump 是指進程異常退出時,操作系統將進程的記憶體狀態保存到文件中,這個文件就是 Core Dump 文件,中文一般翻譯為“核心轉儲”,哈,看起來還不如不翻譯。 我們可以認為 Core Dump 是“記憶體快照”,但實際上,除了記憶體信息之外,還有些關鍵的程 ...
  • CS5366內部集成了PD3.0及DSC decoder,應用Type-C轉HDMI2.0的顯示協議轉換晶元, 簡介: CS5366系列提供了USB Type-C(DisplayPort Alternate Mode)到HDMI轉換器的單晶元解決方案,帶有電源傳輸。CS5366系列支持一個USB T ...
  • 參考帖子:https://blog.csdn.net/freedompoi/article/details/122350866 目前想要實現STM32F4自帶的DMA雙緩衝區,嘗試過一版,結果不能預期,就使用了RxHalfCplt和RxCplt去實現DMA雙緩衝區的效果。 現在有時間了,又重新實現S ...
  • ## 介紹 windows系統自帶的遠程桌面連接相對市面上其他的遠程軟體而言有他的優點: 1. 免費 2. 連接穩定 3. 操作流暢,幾乎沒有遠程辦公的卡滯感 但是,唯一的缺點是連接的電腦之間必須使用一個區域網,也就是說比較適合校園、企業用戶。以校園為例進行講解。 ## 使用前提 1. 連接及被連接 ...
  • # 文件系統 > 文件是面向OS和麵向使用者而言的,對於人來說,音樂,圖片,文檔,游戲,軟體,郵件,等記錄信息的載體都被操作系統統稱為文件,而存儲在HDD(機械硬碟)和SSD(固態硬碟)里.因此文件是一種實體的抽象,而之所以文件需要文件名,是因為不同的文件需要進行相對應的區分,也就是文件名,而其中的 ...
  • # region Region是HBase數據管理的基本單位,region有一點像關係型數據的分區。 Region中存儲這用戶的真實數據,而為了管理這些數據,HBase使用了RegionSever來管理region。 ## region的分配 一個表中可以包含一個或多個Region。 每個Regio ...
  • 事務隔離級別遺留問題: 在讀已提交的級別下,事務B可以讀到事務A持有寫鎖的的記錄,且讀到的是未更新前的,為何寫讀沒有衝突? 可重覆讀級別,事務B可以更新事務A理論上應該已經獲取讀鎖的記錄,且更新後,事務A依然可以讀到數據,為何讀-寫-讀沒有衝突? 在可重覆讀級別,幻讀沒有產生 其中,前兩個問題就是因 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...