数据治理

国际数据管理协会(DAMA)认为:数据治理是对数据资产管理行使权力和控制的活动集合;

数据治理的概念并没有标准的界定,可从微观、中观和宏观的角度分别来理解。

(1)微观上,数据治理指的是个体的数据管理,即对数据的实用性、可用性、完整性和安全性的整体管理。

(2)中观上,数据治理是指公共治理,即区域和国家对其主权范围内的数据质量、权属、流动机制等方面的宏观管理。

(3)宏观上,数据治理指的是全球治理,即在大数据时代,以国家、国际组织、多利益攸关方等为主体,对数据权利、流通、管理等方面的治理

(1)数据标准管理是统一对数据的理解和使用,为数据的属性、业务规则、管理属性和技术属性制定统一的规范。通过数据标准管理,可以加强对业务的标准化工作,强化对业务的管理,完成对重点数据的统一管理。数据标准管理的原则:保证数据标准命名、编码的唯一性,维护数据标准的权威性和稳定性,保证数据标准的准确性和可执行性。

(2)数据质量管理是指通过一系列技术手段或者管理手段提高数据质量的过程。数据质量管理是循环管理的过程,目的是通过提升数据的使用价值,为系统赢得经济效益。

(4)数据生命周期管理是按照数据的业务属性划分数据的几个阶段:数据的创建、数据的使用、数据的归档和数据的销毁。数据生命周期管理的目的是为了满足对历史数据查询的要求,减少数据冗余,提高数据的一致性,并且提升系统的性能和响应速度。降低数据存储、运维等方面的基础设施投入[1]。

(一)DGI数据治理框架

从DGI数据治理框架整体的结构上看,数据治理的开展首先要明确治理的战略目标,建立完善数据治理的组织架构,通过制度建设明确数据治理的职责划分,建立统一的数据标准,根据企业的实际情况建立合适的数据治理流程规范。通过对DGI数据治理框架的分析,为本文后续数据治理问题分析、数据治理对策提供依据[2]。

(二)DAMA数据治理框架

国际数据管理协会(DAMAInternational)总结了数据管理的十大职能,指出数据治理处于核心位置

DAMA数据治理框架指出数据治理作为数据管理的核心内容,指导元数据管理等其他数据管理职能的执行。数据治理主要围绕其他9个方面的数据管理工作进行,其他9个数据管理职能是数据治理的核心领域。元数据管理是数据治理开展的基础,数据质量管理是数据治理的重点,数据安全管理是数据治理的前提保证。该数据治理框架为本文后续数据治理核心领域的分析提供理论支持。

(1)数据架构管理:定义企业数据需求,规划数据架构蓝图。架构管理主要活动包括设计企业数据架构,制定数据架构管理方案

(3)数据操作管理:针对关系型数据库而言,对数据进行统一计划和控制。

(4)数据安全管理:对数据的访问安全进行管理,保障数据使用合规。

(5)参考数据和主数据管理对企业各系统的参考数据和主数据进行管理,保障基础数据的准确性。

(6)数据仓库和商务智能管理:建立企业数据仓库,利用商务智能管理为业务部门提供数据和技术报告。

(7)文档和内容管理:对文本、视频、图像等非结构化数据进行统一规划、实施和控制。

(8)元数据管理:对企业元数据进行管理,包括元数据血缘分析等活动。

(三)IBM数据治理统一流程

(1)定义业务问题:企业需要以业务为导向,围绕解决业务上的痛点(例如某个领域的数据质量问题)来划定数据治理的范围。

(2)获取高层支持:通过业务经典案例来获得高层支持是比较快速有效的方式。

(3)执行成熟度评估:调研企业数据管理现状,执行成熟度评估。

(4)创建路线图:制定企业管理目标蓝图,根据短期、中期、长期战略制定数据治理的具体目标。

(5)建立组织蓝图:建立组织蓝图,建立数据组织体系。

(6)创建数据字典:建立数据字典,统一数据语言。

(7)理解数据:从业务、技术、管理三个方面理解数据,主要包括了解数据的业务、技术、管理属性,从而理解数据的业务含义、技术含义和管理含义。

(8)创建元数据存储库:元数据是关于数据的数据。元数据的建设对于数据资产管理、提升数据价值有着重要的意义。

(9)定义度量指标:制定数据治理考核指标,以便跟踪数据治理项目的进展。

(10)治理主数据:常见的主数据包括物料、单位、员工、客户、供应商等核心基础数据。企业治理主数据需要定标准、建平台、清数据、设体系。

(11)治理分析:对数据治理的效果进行彻底分析。

(13)治理信息生命周期:围绕数据的全生命周期进行数据治理。

(1)从微观上看,数据治理能够实现数据共享、数据准确和数据可用

①共享:知道公司有哪些数据。业务视角上来看,业务内部多载体(PRD、邮件、wiki、共享文档)知识记录,受入离调转的影响,“考古成本”高;公司视角:跨组织数据流通黑盒,数据不流通

③可用:数据质量需要保障。已经下线了文档还存在;不同数据健康状态监控;数据血缘追溯问题排查;不同数据格式导致下游消费解析成本过高;上游变更下游无感知

(2)从宏观上来看,数据治理能够优化数据质量、保障数据安全、维护数据主体权利、提高数据流通效率

①优化数据质量,发掘数据资产价值。大数据时代的数据具有5V特征(数据体量大(Volume)、数据类型多(Variety)、处理速度快(Velocity)、价值密度低(Value)准确性(Veracity))。数据治理能够压缩数据体量、提高价值密度,促进数据资产价值最大化。

②保障数据安全,确保国家社会稳定

③建立数据规则,维护数据主体权利。数据治理能够工业大数据、商业数据和公共数据流动保驾护航。

④降低边际成本,提高数据流通效率。日前数据掌握在诸多不同的主体中,各个主体之间信息不流通,数据无法真正得到重复利用,信息孤岛效应明显,数据治理能够有效改善这种状况。

(3)我国形成了相对完整的数据产业体系,并融合于各个领域形成新生业态,使得越来越多的产业领域需要实行数据治理策略。我国大数据产业体系主要包括核心产业、关联产业及融合产业,分别为数据治理提供了基础条件及体现了其实际应用,其中互联网、工业、金融、交通等领域发展态势较好。目前,我国格外重视大数据产业的发展,加大投资规模和研发投入,投资规模超过8000亿元[4]。

参考资料:

[1]侯睿.上市公司财务画像系统的数据治理研究——基于中航电子的实践[D].郑州航空工业管理学院,2021.

[2]杜昊锋.数字化转型下宁夏N城商行数据治理研究

[3]郑岩.城商行:强化数据质量管理提升信息科技价值[J].金融电子化,2014(05):5-6.

THE END
1.数据治理工作如何精准高效趋利避害?在追求数据治理卓越的路上,我们不仅要关注机制的建设,更要激发每一位员工的潜能。鼓励员工学习考取DAMA-CDGA/CDGP数据管理知识体系证书,就是为他们提供了一把开启数据治理智慧之门的钥匙。通过系统的学习与实践,员工们能够不断提升自己的专业素养,为数据治理工作注入https://mp.weixin.qq.com/s?__biz=MzA4NDA0MDkyOA==&mid=2650893321&idx=1&sn=4ec20c941076608047a46494f447f37a&chksm=8532632dcd888043e315658688bcd2b494a015815365158e0a7e24f8231c8fa351513c2bd2c2&scene=27
2.数据治理的8种方法建立有效的数据治理架构是实现数据治理目标的前提。企业需要构建清晰的数据治理组织结构,明确各层级的职责和权限。例如,设立数据治理委员会、数据管理团队及数据管理员等角色,确保数据治理策略和流程能够高效地执行。还需制定详细的数据治理政策和流程,以指导日常的数据管理工作。 https://www.fanruan.com/bw/doc/179021
3.数据治理数据治理是指从使用零散数据变为使用统一主数据、从具有很少或没有组织和流程治理到企业范围内的综合数据治理、从尝试处理主数据混乱状况到主数据井井有条的一个过程。数据治理是一种数据管理概念,涉及使组织能够确保在数据的整个生命周期中存在高数据质量的能力。一个数据管家是确保数据治理流程遵循,指导执行,并建议改https://baike.sogou.com/v71808167.htm
4.数据治理是什么?企业应如何进行数据治理工作的开展?数据治理就是指在一定的组织范围内,依托制度法规、标准规范、应用实践和支撑技术对数据进行全生命周期的https://www.zhihu.com/question/526956747/answer/56731188614
5.数据治理招聘招聘数据治理人才猎聘数据治理招聘网为您提供大量的数据治理招聘信息,有超过10000多数据治理招聘信息任你选寻,招聘数据治理人才就来猎聘数据治理招聘网!https://www.liepin.com/career/shujuzhili/
6.数据治理人人都是产品经理数据治理:一个聚餐故事讲明白 “数据治理迷雾重重,聚餐故事巧解其中。” 数据治理概念抽象,难以落地,让人摸不着头脑。如何将其清晰阐释?本文将以一场聚餐为喻,深入浅出地剖析数据治理的流程与要点,让你轻松领悟。 风姑娘的数字视角 数据治理数据资产权限管理 https://www.woshipm.com/tag/%E6%95%B0%E6%8D%AE%E6%B2%BB%E7%90%86
7.数据治理(豆瓣)《数据治理——理论、方法与实践》关注以数据为关键要素的数字经济时代背景下的数据治理问题,分为 8 章。第 1 、2 章以数据治 理基础概念作为铺垫,重点对数据、数据治理以及数据治理体系所涵盖的内容进行全面梳理,明晰数据治理的现状、趋势,并进行国内外数据治理理念与体系的比较;第3~ 7章是数据治理核心问题探讨https://book.douban.com/subject/36811154/
8.数据治理入门干货:是什么,如何做澎湃号·湃客澎湃新闻在大数据时代,企业积累的数据量不断增长,如何有效地管理和利用这些数据成为了企业成功的关键。数据治理(Data Governance)是确保数据的可用性、完整性、安全性和一致性的一系列管理流程和方法。它不仅涵盖了数据的管理,还涉及到数据的战略规划、政策制定、责任分配和数据生命周期管理。 https://www.thepaper.cn/newsDetail_forward_29177343
9.数据治理实践第十五期:“管”“用”结合的数据才管用德勤据中共中央国务院2020年3月30日《关于构建更加完善的要素市场和配置体制机制的意见》中第二十二条提及“加强数据资源整合和安全保护,探索建立统一规范的数据管理制度,提高数据质量和规范性,丰富数据产品”,将数据治理与应用的提到了新的政策高度。 回顾上期文章,我们介绍了如何通过“以用促治,以治促建https://www2.deloitte.com/cn/zh/pages/financial-services/articles/data-only-works-when-manage-and-use-combined.html
10.数据治理数据治理8种方法数据治理今天给大家推荐的是数据治理套路8法,个人觉得这8种方法中监管驱动法和利益驱动法是最常见的,也是一直在治,但只能局部治理的方法,未来是数字时代,必须体系构建(顶层设计)+价值驱动(利益驱动法)+技术支撑(技术推动法)+如果再有监管强制治理,就更完美了。 https://download.csdn.net/blog/column/11650811/123924221
11.什么是数据治理?数据治理到底治什么?(数据治理哪些方面?)定义:数据治理是指一套用于确保数据质量、安全性、合规性和有效利用的管理机制、流程和标准。它涉及数据的全生命周期管理,从数据的产生、收集、存储、处理、分析、应用到最终的销毁或归档,通过制定并执行一系列政策、流程、标准和角色职责,确保数据成为组织可信赖的资产。 https://www.hypers.com/content/archives/5299
12.数据治理的10个基本特征数据谱系:数据谱系是跟踪数据从其源头到其目的地的移动的能力。数据治理平台应具有数据谱系功能,允许用户了解数据的来源、如何转换以及它去哪里。 数据质量管理:数据质量对于有效的数据管理至关重要。数据治理平台应具有数据质量管理功能,允许用户衡量、监测和改进其数据质量。 https://www.ppmis.cn/a/zhishi/yingxiaotuiguang/189.html
13.数据治理“三字经”,伴君摘得“满天星”随着我国数字经济的蓬勃发展,大数据已经成为推动社会发展和企业竞争的重要资源,数据要素也被提升到了前所未有的高度。然而,面对海量的数据资源,如何高效管理和有效利用,成为众多企业亟待解决的一道难题。 数据治理“三字经”概要 数据治理“三字经”解读 《数据治理“三字经”》这首短诗虽然精炼,但却包含了大量的信息,每一https://nic.hnuu.edu.cn/10043/2023/0029384.html
14.什么是数据治理?一文介绍数据治理的意义,内容和框架数据治理是指通过合理的组织、管理和控制,确保数据的准确性、可靠性、可用性和一致性的过程。在当今数据驱动的时代,数据治理的意义越来越被人们所重视。数据治理可以帮助组织有效管理大量的数据资源,加强数据的安全性和合规性,提高数据的质量和价值,从而在竞争中取得优势。 https://www.jiandaoyun.com/fe/sjzlsjzldy/