- 相關推薦
數據質量管理5要素分析
借助客戶數據整合(CDI)軟件和主數據管理(MDM)軟件的幫助，人們可以把上述各種在不同時期因為不同目的而生成的數據進行一定程度的整合和清理，但是要想真正長期保證數據的高質量，還必須從以下5個方面著手。
1. 建立數據的標準，明確數據的定義。通常，獨立的應用系統會有一個比較模糊的、有時也會有比較清晰的數據標準和數據定義。為了保證系統的正常運行，這些系統的用戶必須在數據的標準和數據的定義上達成一致。不過，這些標準和定義大多數時候與企業中其他系統中的數據標準和定義并不一致。因此，需要從整個企業的角度出發，建立統一的數據標準和數據定義，同時，整個企業必須就這個數據標準和數據定義達成共識。這一句話說起來容易做起來難。因為人通常本能地會拒絕改變，改變數據標準和定義并不是輕而易舉的。為此，強烈建立在企業中除了設立一個高管級別的數據質量管理委員會外，還需要選定一個執行能力強的項目負責人，需要他推動相關人員接受新的數據標準和定義。
在具體建立新的數據標準和數據定義時，需要仔細權衡，哪些定義和標準是出于企業內部的原因(比如出于方便、習慣等)制訂的，哪些定義和標準是因為要有效反映外部的真實世界而制訂的。相對而言，前者更容易執行一些。
2. 建立一個可重復的數據收集、數據修改和數據維護流程。數據管理面臨的兩個主要挑戰是企業本身的復雜性和身份信息不斷變化。這兩個客觀原因的存在意味著企業的數據質量保證行動永遠沒有結束之日，因此，企業在制訂數據質量的保證措施和數據質量指標時，必須保證這些措施和指標能夠不斷重復。
3. 在數據轉化流程中設立多個性能監控點。數據的質量高低可以根據最終用戶的需求來評價，也可以通過與同類數據源的比較來評價，還可以通過與前一階段的數據質量進行比較來評價。但在制訂數據質量的戰略時，比較理想的辦法還是根據最終用戶的需求來進行。不過這里存在一個問題是，等到最終用戶拿到數據時再針對數據的問題進行修正已經太遲了。一個有效的數據質量保證辦法是在每當數據發生轉換后就與前一時期進行比較，從而對數據質量進行評估。如果此前所采用的數據質量改進方法有助于提高最終用戶的滿意度，那么，這些中間指標的達標也預示著項目的最終成功。
4. 對流程不斷進行改善和優化。我們常常聽到有人說，他們制訂了很多辦法來迅速而且大幅度提升數據的質量，但很少聽說最后他們能真正得到滿意的結果。其原因就在于數據的質量改進絕非一朝一夕的事情，而是一個持續的過程。正確的辦法是通過一個不斷改進的流程，持續不斷地排除錯誤、對數據進行整合和標準化，最后達到流程的自動化，從而降低數據質量保證計劃的總體開銷。實際上，排除錯誤、數據整合和數據標準化從來就不是一件容易的事情。數據質量管理計劃的負責人將配合公司高管組成的數據質量管理委員會來保證這個流程的順利執行。要注意的是，作為該項目的負責人，不能墨守成規，僅僅因為自己以前一向采用某種方法，就要求別人也必須采用這一方法，特別是當發現這些方法成本高昂的時候，就應該考慮換一種方式了。
5. 把責任落實到人。通常，我們認為那些與數據的產生、維護相關的人員是負責任的，但是，很有可能，他們有很多其他的工作要做，因此作為數據質量的負責人光有善良的想法是難以提高數據的質量，很有可能一輩子也達不到目標。對于那些負責數據的產生、數據的合理化以及對數據進行清理和維護的人，應該給他們的活動制訂明確的指標，這樣他們才能真正理解人們到底希望他們達到什么目標。更重要的，他們還需要針對這些指標細化對他們自己的要求，當然，他們會因為達到或者超過這些指標而得到獎勵。其中，一個執行力強的負責人的價值體現出來，他會針對具體情況適時調整數據質量的目標。
最后，再次強調考慮與數據管理和數據質量的改進項目有關的人的因素，他們的行為是非常重要的。從某種程度上說，要比具體選擇什么軟件要重要得多。上述5點有助于幫助組織規范數據質量管理中與人有關的流程。
提高數據質量的三個步驟
由于大多數系統和應用程序會持續不斷接收到新數據，數據量也在不斷增加，因此確保數據質量并不是一次就能完成的。所有企業都應該使用一種反復進行的階段性過程來管理數據質量，此過程包括數據質量評估、規劃以及策略的選擇和實施。
第一步對數據質量進行評估。評估當前的數據質量狀態是第一步。對數據質量進行評估能幫助企業準確地了解數據的內容、質量和結構。主管人員參與數據質量評估以及分析在數據檢查過程中發現的問題對于數據質量評估來說都很重要。在最有效的數據質量評估中，所有問題都將按照對業務影響從大到小的順序列出，這將幫助IT機構節省項目成本。
第二步，制訂數據質量計劃。徹底了解企業數據的內容和質量后，接下來的步驟是制訂一個計劃，來修改當前的錯誤并避免未來錯誤的發生。有效的計劃不但可以提高企業當前所有應用程序中數據的質量，還將制定一些方式以確保新應用程序從一開始就遵循數據質量規則。
第三步，選擇和實施數據質量策略。選擇改善企業數據質量的策略，要求決策者權衡每個數據質量計劃的成本以及該策略產生的影響。目前的策略類型有兩種: 在企業輸入數據時提高數據質量的方法稱為“上游”方法，而從運營系統提取數據的應用程序(如數據倉庫)中改善數據質量的方法是“下游”方法。
上游策略研究當前應用程序的邏輯、數據和流程，解決檢查過程中發現的異常情況。此策略可能涉及到更改應用程序邏輯、添加更好的表驗證、改善與數據輸入相關的流程，它致力于企業數據的高準確性。另外，此策略還要求使用應用程序本身附帶的數據質量功能。
下游策略解決目標應用程序或數據倉庫(而非數據源)中的數據質量問題。由于數據可以根據需要隨時進行修改，所以企業能夠在流程(尤其是數據轉換、名稱和地址清洗以及查找驗證)中改善數據質量。下游策略僅為目標應用程序或數據倉庫改善數據質量，但與上游策略相比，它的實施過程更簡單，成本更低。
【數據質量管理5要素分析】相關文章：
質量管理的要素07-25
施工質量管理的要素09-17
建筑的構成要素分析09-16
影響網站排名要素分析10-10
爵士舞的體能要素分析08-27
企業安全生產文化要素分析10-08
《今日觀察》節目要素及創新分析09-10
網站推廣優化要素及途徑分析09-10
景區質量管理分析10-17
IBM大數據分析07-09