數(shù)據(jù)認責:有效數(shù)據(jù)管理與數(shù)據(jù)治理的實踐指南
定 價:¥99
中 教 價:¥54.45 (5.50折)
庫 存 數(shù): 6
叢 書 名:數(shù)字經(jīng)濟創(chuàng)新驅(qū)動與技術賦能叢書
本書提供了關于如何在數(shù)據(jù)治理中建立和運行數(shù)據(jù)認責工作的適用且可操作的信息和說明,旨在為新任數(shù)據(jù)專員或數(shù)據(jù)治理經(jīng)理提供在數(shù)據(jù)認責方面所需的知識,以確保其工作有效和高效。本書分為11章,包括:數(shù)據(jù)認責和數(shù)據(jù)治理:二者如何結合;了解數(shù)據(jù)認責的類型;認責管理的角色和職責;實施數(shù)據(jù)認責;培訓業(yè)務型數(shù)據(jù)專員;數(shù)據(jù)認責實踐;數(shù)據(jù)專員的重要角色;衡量數(shù)據(jù)認責進度:指標;數(shù)據(jù)認責成熟度評估;大數(shù)據(jù)和數(shù)據(jù)湖認責;基于數(shù)據(jù)域開展數(shù)據(jù)治理和認責。本書內(nèi)容豐富,理論和實踐相結合,易讀性和可操作性強,可以作為數(shù)據(jù)質(zhì)量管理的入門和進階用書,還可作為數(shù)據(jù)治理、信息技術、數(shù)據(jù)分析等領域人員的參考用書,尤其適合對數(shù)據(jù)認責感興趣的讀者和負責組織以及運行數(shù)據(jù)認責工作的人員閱讀。
國內(nèi)一線數(shù)據(jù)管理領域?qū)<夜餐g,從企業(yè)專崗管理數(shù)據(jù)的角度介紹如何做好數(shù)據(jù)質(zhì)量管理工作,有較強指導性。
緒論概述當前,企業(yè)越來越重視數(shù)據(jù)管理,包括提高數(shù)據(jù)質(zhì)量、理解數(shù)據(jù)的含義、利用數(shù)據(jù)獲得競爭優(yōu)勢以及將數(shù)據(jù)視為企業(yè)應有的資產(chǎn)。但要做好數(shù)據(jù)管理工作,就需要責任制,也就是說,業(yè)務職能必須對其擁有和使用的數(shù)據(jù)負責。通過適當?shù)募軜嫛⒔M織和資源來管理數(shù)據(jù),被稱為數(shù)據(jù)治理。數(shù)據(jù)認責是在數(shù)據(jù)治理體系之內(nèi)的。各種類型的數(shù)據(jù)專員(在本書后面詳細介紹)與其他主題專家和利益相關者密切合作,以實現(xiàn)數(shù)據(jù)治理工作制定的目標和交付成果。數(shù)據(jù)認責工作應由數(shù)據(jù)治理辦公室管理和協(xié)調(diào),并應得到公司高級領導的支持。本書提供了關于如何在數(shù)據(jù)治理中建立和運行數(shù)據(jù)認責工作的適用且可操作的信息和說明。本書旨在為新任數(shù)據(jù)專員或數(shù)據(jù)治理經(jīng)理提供在數(shù)據(jù)認責方面所需的知識,以確保其工作有效和高效。本書還提供了承擔數(shù)據(jù)專員職責的人員所需的詳細信息。問題陳述使用數(shù)據(jù)過程中一定會面臨挑戰(zhàn),包括:? 數(shù)據(jù)無法解釋自身。必須有人對數(shù)據(jù)進行解釋,包括數(shù)據(jù)的含義、如何正確使用數(shù)據(jù)以及如何評估數(shù)據(jù)質(zhì)量是否良好。? 數(shù)據(jù)被許多人共享和使用,用于許多不同的目的。那么,誰擁有它?當數(shù)據(jù)出現(xiàn)錯誤時,誰對此做出決定并負責?? 許多使用數(shù)據(jù)的流程都依賴于流程上游的人員對數(shù)據(jù)的正確處理,但誰來說什么是正確?當出錯的時候,是由誰來判定?? 軟件開發(fā)生命周期需要在需求、分析、設計、構建和數(shù)據(jù)使用之間進行多次切換。在很多場合,切換可能會破壞數(shù)據(jù)并危及數(shù)據(jù)質(zhì)量。? 負責數(shù)據(jù)實現(xiàn)的技術人員不熟悉數(shù)據(jù)的含義或如何使用數(shù)據(jù)。? 我們這些數(shù)據(jù)圈的人在容忍歧義方面有著悠久的歷史和習慣,無論是在數(shù)據(jù)含義還是在數(shù)據(jù)內(nèi)容方面。所有這些因素都會導致人們對數(shù)據(jù)的理解不足,并導致人們認為數(shù)據(jù)質(zhì)量差。這些因素還導致數(shù)據(jù)管理不善。解決這些挑戰(zhàn)的辦法是積極有效地管理數(shù)據(jù)。但許多公司用來匯集元數(shù)據(jù)的相當隨意的方法論并不是真實或有效的數(shù)據(jù)管理。一些失敗的方法包括:? 數(shù)據(jù)定義。這些定義通常是由項目工作人員匆忙編寫的,并且定義在整個企業(yè)中沒有合理化,導致同一術語的多個定義,通常使用不同的業(yè)務數(shù)據(jù)元素名稱。? 數(shù)據(jù)質(zhì)量。通常沒有制定明確的數(shù)據(jù)質(zhì)量規(guī)則,也很少衡量質(zhì)量本身。即使明確了規(guī)則,規(guī)則的上下文背景(規(guī)則適用的數(shù)據(jù)用途)也經(jīng)常被忽略。所有這些都會導致人們對所需的數(shù)據(jù)質(zhì)量以及所實現(xiàn)的數(shù)據(jù)質(zhì)量感到困惑。? 文檔。包含元數(shù)據(jù)的文檔很少被正式發(fā)布,而且經(jīng)常丟失、藏在書架上或存檔文件中。該文檔知者甚少且不易獲得,也沒有一個強大的搜索引擎來讓感興趣的用戶找到他們需要的東西。? 創(chuàng)建和使用業(yè)務規(guī)則。通常對可以或應該創(chuàng)建實體(如客戶或產(chǎn)品)的條件以及應該如何使用數(shù)據(jù)缺乏了解。這種缺乏了解的情況導致收集到的關于該實體的信息不完整或不準確,以及數(shù)據(jù)被用于并未設想過的目的。最終的結果是,基于數(shù)據(jù)的業(yè)務決策可能會導致非最優(yōu)結果。作為數(shù)據(jù)治理工作的一部分,數(shù)據(jù)認責對于企業(yè)管理數(shù)據(jù)和實現(xiàn)解決方案以應對以上挑戰(zhàn)至關重要。通過數(shù)據(jù)認責,組織可以開始將數(shù)據(jù)視為資產(chǎn)。與其他資產(chǎn)一樣,數(shù)據(jù)需要被盤點、擁有、明智地使用、管理和理解。這需要使用與物理資產(chǎn)不同的數(shù)據(jù)技術,但需求是相同的。對于數(shù)據(jù)資產(chǎn),通常結合元數(shù)據(jù)存儲庫,以正式發(fā)布的業(yè)務術語表的形式來盤點及理解數(shù)據(jù)。建立所有權需要了解數(shù)據(jù)是如何收集的以及誰使用數(shù)據(jù),然后確定誰最能對數(shù)據(jù)元素的內(nèi)容和質(zhì)量負責。最后,確保數(shù)據(jù)得到合理的使用意味著了解和管理數(shù)據(jù)是如何創(chuàng)建的,創(chuàng)建數(shù)據(jù)的目的是什么,以及它是否適合在可能出現(xiàn)的新情況下使用,甚至是否適合在當前使用的情況下使用。數(shù)據(jù)專員在數(shù)據(jù)管理中的職責已被正確管理的數(shù)據(jù)使企業(yè)能夠在較少的失誤和更少浪費人力物力的情況下獲得成功。業(yè)務型數(shù)據(jù)專員在數(shù)據(jù)管理工作中發(fā)揮著重要作用,他們決定了以下內(nèi)容。(1)在數(shù)據(jù)倉庫中? 需要什么維度以及它們的含義。? 需要什么事實以及它們所依賴的維度。? 如何定義事實以及派生規(guī)則和聚合規(guī)則。? 統(tǒng)一維度或事實提出的不同術語(實際上是相同的)。? 誰必須對構成維度和事實的數(shù)據(jù)元素負責。? 如何轉(zhuǎn)換數(shù)據(jù)以及在數(shù)據(jù)倉庫中使用它。(2)在主數(shù)據(jù)管理中? 應管理哪些數(shù)據(jù)實體(客戶、產(chǎn)品、供應商等),以何種優(yōu)先級管理,以及這些實體的含義(例如,什么是客戶?)。? 需要哪些特征屬性(具有良好的質(zhì)量)來實現(xiàn)實體解析。? 確定實體唯一性的敏感度是什么(對假陽性和假陰性的敏感度)。? 枚舉屬性的適當參考數(shù)據(jù)值是什么,以及如何從可用數(shù)據(jù)中導出這些值。(3)在數(shù)據(jù)質(zhì)量改進方面? 既定的目標需要什么樣的數(shù)據(jù)質(zhì)量等級。? 應該對哪些數(shù)據(jù)進行剖析以嚴格檢查這些值。? 什么構成數(shù)據(jù)的期望值。這些期望可以包括范圍、特定值、數(shù)據(jù)類型、數(shù)據(jù)分布、模式和關系。? 導致數(shù)據(jù)質(zhì)量差的根本原因有哪些。? 為了解決根本原因和/或清洗數(shù)據(jù),必須將哪些要求給到IT部門。(4)在系統(tǒng)開發(fā)中,數(shù)據(jù)專員作為關鍵的角色來確保以下幾方面? 系統(tǒng)使用的數(shù)據(jù)定義是完善的
關于作者30多年前,大衛(wèi)?普羅特金(David Plotkin)在一家大型石油公司工作了15年后,從化學工程領域轉(zhuǎn)型到了數(shù)據(jù)管理領域。之后,他一直從事數(shù)據(jù)建模、元數(shù)據(jù)、數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量和數(shù)據(jù)治理方面的工作。他的大部分職業(yè)生涯都在金融服務和保險領域,但他也花了3年時間擔任企業(yè)信息管理的顧問,指導客戶公司規(guī)劃和實施數(shù)據(jù)治理數(shù)據(jù)治理既是一項獨立的工作,也是數(shù)據(jù)質(zhì)量改進和主數(shù)據(jù)管理等其他舉措的一部分。他在一家保險公司負責實施數(shù)據(jù)治理,指導另一家保險企業(yè)開展全球數(shù)據(jù)認責,還曾在一家大型銀行管理運營數(shù)據(jù)治理能力中心,負責兩家大型銀行的數(shù)據(jù)質(zhì)量改進工作。他在管理數(shù)據(jù)治理項目和數(shù)據(jù)質(zhì)量商業(yè)工具的使用上擁有豐富的經(jīng)驗。除了本書之外,他還編寫并發(fā)表了一個關于數(shù)據(jù)認責完整指南的系列教程,該教程提供了廣泛而詳細的培訓內(nèi)容,目的是使數(shù)據(jù)認責工作在各種不同類型的企業(yè)中取得成功。他是DAMA協(xié)會和多個專業(yè)峰會上備受歡迎的演講者,也是與元數(shù)據(jù)、數(shù)據(jù)治理和數(shù)據(jù)質(zhì)量相關的許多主題的主題專家。
目錄本書翻譯組關于作者致謝緒論 1第1章 數(shù)據(jù)認責和數(shù)據(jù)治理:二者如何結合 61.1 什么是數(shù)據(jù)治理 61.2 驅(qū)動數(shù)據(jù)治理的一些最佳實踐 71.3 什么是數(shù)據(jù)認責 71.4 數(shù)據(jù)認責的總體目標 81.5 將數(shù)據(jù)轉(zhuǎn)變至受控狀態(tài) 91.6 三個P:政策、流程和規(guī)程 111.7 數(shù)據(jù)認責如何與數(shù)據(jù)治理相結合 121.7.1 高層領導小組 131.7.2 數(shù)據(jù)治理委員會 151.7.3 數(shù)據(jù)認責專委會 181.7.4 通過技術型數(shù)據(jù)專員提供IT支持 181.7.5 數(shù)據(jù)治理辦公室 191.8 整體數(shù)據(jù)治理組織 201.9 小結 21第2章 了解數(shù)據(jù)認責的類型 222.1 業(yè)務型數(shù)據(jù)專員 232.1.1 選擇合適的業(yè)務型數(shù)據(jù)專員 232.1.2 成功的業(yè)務型數(shù)據(jù)專員所具備的特征 242.1.3 業(yè)務型數(shù)據(jù)專員與數(shù)據(jù) 252.1.4 業(yè)務型數(shù)據(jù)專員的關鍵角色 272.2 技術型數(shù)據(jù)專員 282.3 項目型數(shù)據(jù)專員 292.4 操作型數(shù)據(jù)專員 302.5 小結 30第3章 認責管理的角色與職責 313.1 數(shù)據(jù)認責專委會 313.1.1 什么是數(shù)據(jù)認責專委會 313.1.2 數(shù)據(jù)認責專委會成員 313.1.3 數(shù)據(jù)認責專委會職責 333.2 數(shù)據(jù)治理經(jīng)理 353.3 企業(yè)級數(shù)據(jù)專員 353.4 業(yè)務型數(shù)據(jù)專員 373.5 項目型數(shù)據(jù)專員 413.6 技術型數(shù)據(jù)專員 443.7 操作型數(shù)據(jù)專員 443.8 數(shù)據(jù)認責RACI職能矩陣 463.9 小結 47第4章 實施數(shù)據(jù)認責 484.1 倡導與溝通數(shù)據(jù)認責 494.1.1 數(shù)據(jù)認責溝通信息 494.1.2 準備數(shù)據(jù)認責溝通 514.2 獲取高層與基層的支持 524.3 加強對組織的理解 534.3.1 組織架構 534.3.2 組織文化 574.4 組織數(shù)據(jù)專員 584.5 厘清出發(fā)點 594.5.1 厘清已擁有什么:數(shù)據(jù) 594.5.2 厘清已擁有什么:元數(shù)據(jù) 614.5.3 厘清已擁有什么:數(shù)據(jù)質(zhì)量 644.5.4 厘清已擁有什么:流程 664.5.5 厘清已擁有什么:工具 664.6 小結 67第5章 培訓業(yè)務型數(shù)據(jù)專員 685.1 業(yè)務型數(shù)據(jù)專員培訓課程 705.2 關鍵業(yè)務數(shù)據(jù)元素的元數(shù)據(jù) 715.3 數(shù)據(jù)的使用 715.3.1 信息生產(chǎn)者與消費者 725.3.2 使用SIPOC了解數(shù)據(jù)使用 735.4 數(shù)據(jù)認責流程介紹 735.5 認責支撐工具 745.6 提升數(shù)據(jù)質(zhì)量的培訓 755.7 小結 76第6章 數(shù)據(jù)認責實踐 776.1 基礎知識 776.1.1 選擇關鍵業(yè)務數(shù)據(jù)元素 786.1.2 分配負責的業(yè)務型數(shù)據(jù)專員 806.1.3 業(yè)務數(shù)據(jù)元素的命名 816.1.4 創(chuàng)建良好的業(yè)務定義 826.1.5 定義業(yè)務數(shù)據(jù)元素的創(chuàng)建和使用規(guī)則 836.1.6 定義派生規(guī)則 846.2 設置可復用流程 846.3 界定數(shù)據(jù)認責制度實施的范圍 876.4 理解業(yè)務型數(shù)據(jù)專員如何與數(shù)據(jù)治理辦公室互動 886.4.1 與數(shù)據(jù)專員定期舉行會議 886.4.2 使用互動式討論組 896.4.3 成立工作組 906.4.4 項目型數(shù)據(jù)專員如何與業(yè)務型數(shù)據(jù)專員協(xié)作共事 916.5 使用問題日志完成日常工作 926.5.1 什么是問題日志 926.5.2 管理問題日志 926.5.3 理解問題日志流程 936.6 文件記錄和溝通:溝通計劃 956.6.1 什么是必須溝通的? 956.6.2 溝通計劃必須包含什么? 956.6.3 定向溝通的重要性 976.7 在項目方法論中增加數(shù)據(jù)治理工作 986.7.1 把數(shù)據(jù)認責任務增加到項目中的好處 986.7.2 為項目提供支持的數(shù)據(jù)認責角色 986.7.3 數(shù)據(jù)認責任務和模板 996.7.4 培訓項目經(jīng)理 1016.8 構建并遵循數(shù)據(jù)治理或數(shù)據(jù)認責路線圖 1016.9 確定數(shù)據(jù)認責工具 1046.9.1 數(shù)據(jù)認責門戶 1046.9.2 數(shù)據(jù)認責維基百科 1066.9.3 關鍵產(chǎn)物:業(yè)務術語表 1066.9.4 使用工作流實現(xiàn)流程自動化 1096.9.5 元數(shù)據(jù)存儲庫 1156.10 小結 117第7章 數(shù)據(jù)專員的重要角色 1187.1 數(shù)據(jù)認責在數(shù)據(jù)質(zhì)量提升中的角色 1187.1.1 度量和提升數(shù)據(jù)質(zhì)量 1187.1.2 防止數(shù)據(jù)質(zhì)量惡化 1197.1.3 不同場景下的數(shù)據(jù)質(zhì)量提升意味著什么 1207.1.4 提升數(shù)據(jù)質(zhì)量對整體數(shù)據(jù)認責工作的重要性 1217.1.5 理解數(shù)據(jù)質(zhì)量維度 1217.1.6 明確數(shù)據(jù)質(zhì)量規(guī)則 1227.1.7 支持數(shù)據(jù)質(zhì)量與數(shù)據(jù)剖析的改進 1247.1.8 加載過程中強化數(shù)據(jù)質(zhì)量 1267.2 數(shù)據(jù)認責在元數(shù)據(jù)質(zhì)量管理中的角色 1297.2.1 剖析元數(shù)據(jù) 1307.2.2 元數(shù)據(jù)質(zhì)量維度 1317.3 數(shù)據(jù)認責在參考數(shù)據(jù)管理中的角色 1337.3.1 參考數(shù)據(jù)的一般維護 1347.3.2 跨系統(tǒng)保持參考數(shù)據(jù)值一致 1357.4 數(shù)據(jù)認責在主數(shù)據(jù)管理實體解析中的角色 1387.4.1 識別出特征屬性 1397.4.2 查找記錄和映射字段 1427.4.3 標準化數(shù)值 1437.4.4 用外部數(shù)據(jù)源增強數(shù)據(jù) 1437.5 數(shù)據(jù)認責在主數(shù)據(jù)管理遴選處理中的角色 1447.6 數(shù)據(jù)認責在主數(shù)據(jù)管理異常處理中的角色 1467.7 數(shù)據(jù)認責在信息安全中的角色 1487.8 數(shù)據(jù)認責在支持質(zhì)量保證中的角色 1497.9 數(shù)據(jù)認責在編制血緣關系中的角色 1507.10 數(shù)據(jù)認責在流程風險管理中的角色 1527.11 數(shù)據(jù)認責在數(shù)據(jù)隱私法規(guī)中的角色 1537.11.1 數(shù)據(jù)主權法規(guī)的關鍵信條 1547.11.2 遵守法規(guī) 1547.11.3 捕獲其他元數(shù)據(jù)以實現(xiàn)合規(guī)性 1557.11.4 初步了解數(shù)據(jù)和流程支持的數(shù)據(jù)主權法規(guī) 1557.12 小結 157第8章 衡量數(shù)據(jù)認責進度:指標 1608.1 業(yè)務成效指標 1608.2 運營指標 1628.3 小結 166第9章 數(shù)據(jù)認責成熟度評估 1679.1 設定數(shù)據(jù)認責成熟度模型:級別和維度 1679.2 數(shù)據(jù)認責成熟度級別 1679.2.1 成熟度級別1:初始級 1689.2.2 成熟度級別2:策略級 1689.2.3 成熟度級別3:良好級 1689.2.4 成熟度級別4:戰(zhàn)略級 1699.2.5 成熟度級別5:優(yōu)化級 1699.3 數(shù)據(jù)認責成熟度維度的各級別要求 1699.3.1 組織意識 1709.3.2 角色和架構 1709.3.3 標準、政策和流程 1719.3.4 價值創(chuàng)造 1729.4 收集成熟度模型的評估數(shù)據(jù) 1739.5 評估成熟度調(diào)查結果 1749.6 衡量成熟度進展 1749.7 找準差距和改進提升 1779.8 小結 178第10章 大數(shù)據(jù)和數(shù)據(jù)湖認責 17910.1 數(shù)據(jù)認責和大數(shù)據(jù) 17910.2 數(shù)據(jù)認責和數(shù)據(jù)湖 18010.2.1 數(shù)據(jù)湖和元數(shù)據(jù) 18110.2.2 給數(shù)據(jù)湖確定數(shù)據(jù)治理的等級 18210.2.3 在數(shù)據(jù)湖中創(chuàng)建的元數(shù)據(jù) 18310.2.4 治理數(shù)據(jù)湖的建議角色 18410.2.5 數(shù)據(jù)湖和高速數(shù)據(jù)環(huán)境開展數(shù)據(jù)認責 18510.3 小結 186第11章 基于數(shù)據(jù)域開展數(shù)據(jù)治理和認責 18711.1 數(shù)據(jù)域驅(qū)動的數(shù)據(jù)認責案例 18711.1.1 數(shù)據(jù)域驅(qū)動的數(shù)據(jù)治理從何而來? 18811.1.2 數(shù)據(jù)域驅(qū)動的數(shù)據(jù)認責價值 18811.2 數(shù)據(jù)域的定義 19011.3 數(shù)據(jù)域的主要收益 19111.4 確定和設置數(shù)據(jù)域 19211.4.1 業(yè)務主題域 19311.4.2 業(yè)務數(shù)據(jù)元素 19311.4.3 授權數(shù)據(jù)供應點 19411.5 治理數(shù)據(jù)域 19611.5.1 數(shù)據(jù)域和數(shù)據(jù)域委員會 19611.5.2 數(shù)據(jù)域委員會結構和治理 19811.5.3 數(shù)據(jù)域委員會人員配備 19911.6 數(shù)據(jù)域驅(qū)動的數(shù)據(jù)治理關鍵活動 20111.7 數(shù)據(jù)域驅(qū)動的數(shù)據(jù)認責需要一個成熟的組織 20211.8 小結 204附錄 205附錄A 定義及派生規(guī)則示例 205附錄B 培訓計劃大綱范例 205附錄C 用于命名業(yè)務數(shù)據(jù)元素的類詞 211