前言
隨著數字化轉型的深入開展,數據成為新的生產要素。對于非數字原生企業,數據治理的重要性越來越突出。如何有效地開展數據治理工作、提升數據質量、打破數據孤島、充分發揮數據的業務價值,成了業界的熱門話題。本書基于華為數據治理的歷程,介紹了華為數據工作的愿景、整體思路框架,闡述了企業級數據綜合治理體系和方法論,回顧了華為數據底座的建設過程,總結了華為數據治理和數字化轉型的經驗。
華為公司作為典型的非數字原生企業,發展初期基本是以物理世界為中心構建的,缺乏以軟件和數字平臺為核心的數字世界架構,在數字化轉型過程中,面臨著巨大挑戰。華為從小到大、從弱到強幾十年不斷發展的歷程中,伴隨著一次次重大業務變革、信息化建設和數字化轉型。本書理論結合實踐,通過對華為公司數據治理體系和數據底座建設方法與實踐的介紹,講述了數據工作如何支撐業務變革,如何驅動數字化轉型,總結了華為數據工作的發展歷程、經驗和對未來的思考。書中所述的方法、規范、解決方案都經過華為內部的充分實踐,相信對企業數字化轉型的領導者、設計者、實施者和參與數據治理的同行,會有一定的啟發和借鑒意義。
內容簡介
本書共10章,內容從邏輯上可以分為四部分。
第一部分為第1~3章。第1章以非數字原生企業在數字化轉型時面臨的挑戰為引導,闡述了數據驅動的企業數字化轉型理念,介紹了華為公司的數據治理框架;第2章從企業政策和架構協同的角度,介紹了企業級的數據綜合治理體系,理順了數據與變革、運營、IT之間的協同關系,明確了數據管理的責任主體在業務;第3章以數據特性的差異為維度,詳細闡述了不同類型數據的不同管理方式,明確了結構化數據、非結構化數據、外部數據、元數據的核心管理要點。
第二部分為第4~6章,介紹了數據治理工作中的三項重點建設任務:信息架構、數據底座、數據服務。第4章介紹了信息架構的四個組件,給出了建設原則和核心要素,并引出了業務對象、過程、規則三項數字化的建設方向;第5章提出了數據底座建設的整體框架,分別介紹了數據湖和數據主題聯接兩個層次的建設實踐;第6章以自助、高效、復用為數據服務的目的,提出了對數據進行搜索、加工和分析的消費過程管理方案。
第三部分為第7~9章,介紹了數據治理的三項關鍵能力:數據的全量感知、綜合質量提升、可控共享。第7章以數字孿生的全量、無接觸感知為目標,介紹了數據的硬感知和軟感知兩類能力;第8章基于PDCA框架,介紹了對企業業務數據異常的全面監控,從而助力數據質量綜合水平的提升;第9章介紹如何構建以元數據為基礎的數據安全隱私保護框架,如何建立動靜結合的數據保護與授權管理方案。
第四部分為第10章。基于對“機器認知世界”的理解,我們提出了對數據治理未來的思考,暢想了AI治理、數據主權和數據生態建設。未來已來,讓我們共同努力,把數字世界帶入每個人、每個家庭、每個組織,構建萬物互聯的智能世界。
讀者對象
·企業管理者:CEO,CIO,CDO,數字化轉型項目的領導者、設計者和實施者。
·數據從業人員:數據架構師、數據工程師、數據質量工程師、數據產品經理、數據分析師。
·IT從業人員:應用架構師、數據庫專家、業務架構師。
致謝
本書主要作者有馬運(Yun Ma)、杜浩、王強、陳實和周劍鋒。參與寫作的還有公司數據管理部的專家韋冬、廖華赟、趙子文、傅琨等。各位作者在數據領域耕耘和堅持多年。
本書的寫作目的來自內外兩方面:首先,公司內部希望我們對數據工作進行系統的梳理總結,積累企業數字化轉型的經驗;其次,華為云和華為中國地區部也希望我們能夠寫本書,以便和客戶分享華為數據治理的實踐,輸出數據驅動企業數字化轉型的理念和方法。在此感謝陶景文、熊康、鄧濤、洪方明、韓曉、蘇立清等領導的建議、支持和指導。
本書的內容來自華為數據體系多年的工作實踐,特別是最近幾年在數字化轉型方面的探索。公司數據治理的實踐經驗是在公司變革體系、質量運營體系、流程體系、IT和數據體系等各部門的共同努力下取得的。感謝郝健康、張印臣兩位領導對數據體系建設的貢獻!感謝數據體系的全體同人!感謝所有支持數據工作的同事!
感謝華為云殷宏、祝向黨,華為大學陳小宇、蔣文俏以及胡小敏等人從讀者視角對本書進行審視,并在編寫過程中給予了我們很大的幫助。
數字化轉型波瀾壯闊,華為數據治理也歷經十多年沉淀,成果豐富,本書呈現出來的內容實屬掛一漏萬,加上編寫時間倉促,書中難免會出現一些失誤或者不準確的地方,懇請讀者批評指正。
華為公司數據管理部
隨著通信與數字技術的發展,網絡化和數字化給人類帶來更多的精彩和無限的可能,推動我們進入全聯接的信息時代和大數據時代。因此,如何響應這個時代的變化是當前所有企業都需要考慮的問題。
在這樣的時代背景下,數字化轉型正在改變許多企業和行業的運作模式,無論是數字原生企業,還是非數字原生企業,都在積極探索數字化轉型。社會經濟大環境的變化、行業趨勢的變化、競爭對手的壓力、公司的戰略優化、自身經營的改善等是企業數字化轉型最主要的驅動力。
IDC(國際數據公司)預測,鑒于競爭對手和產業都在進行數字化轉型,如果企業不能快速實現數字化轉型,到2022年,它們逾三分之二的目標市場會消失。過去幾年里,IT廠商和傳統企業始終專注于數字化轉型,它們利用第三平臺技術(云計算、移動、大數據/分析、社交)重組企業架構,而物聯網(IoT)、人工智能(AI)和增強與虛擬現實(AR/VR)等創新加速器更進一步推動了這一進程。隨著數字覆蓋面的擴大、智能技術的廣泛普及、應用程序與服務開發的爆發式增長,企業不斷釋放出“倍增創新”能力,數字化轉型已步入第二階段。在這個技術與商業日新月異的環境中,企業競相加強自己的數字化創新能力,以便在快速數字化的全球經濟中提升競爭力,實現繁榮發展。
企業要想在這樣的數字時代生存下來,要么是數字原生企業,要么數字化轉型成功,成為重生后的數字企業。