热门标签 | HotTags
当前位置:  开发笔记 > 程序员 > 正文

数据治理的关键所在,详解数据治理体系化框架

数据为王,治理先行,当下数据治理正在如火如荼地开展,然而目前大部分企业的数据治理可以看到2个关键的问题:其一就是数据治理属于问题驱动和后治理型,即都是数据在产生和使用,协同和共


数据为王,治理先行,当下数据治理正在如火如荼地开展,然而目前大部分企业的数据治理可以看到2个关键的问题:

  • 其一就是数据治理属于问题驱动和后治理型,即都是数据在产生和使用,协同和共享的过程中发现了问题,才来考虑数据治理的内容,这种问题驱动方式很难构建完整的数据治理体系。更多的是建设大量的类似数据稽核类系统,个人任务数据稽核系统本身就是一个反治理下的产物。
  • 其二是希望通过IT系统建设来规范数据治理,这个虽然有点用,但是不全。比如建设MDM主数据系统,会减少类似元数据管理、数据质量管理、数据创建变更流程等。但是要看到系统本身仅仅是治理规范要求的落地,如果你没有事先形成治理规范要求,那么系统再多也没用。

也正是这个原因,我们需要重新来梳理和思考数据治理体系和框架问题。

数据治理的最终目标是提升数据的价值,数据治理非常必要,是企业实现数字战略的基础,它是一个长期、复杂的工程,涉及到组织体系、标准体系、流程体系、技术体系和评价体系五方面的工作领域,包含了数据标准、数据质量、主数据、元数据、数据安全等多个方面内容。我们一一展开来说。



  01  
数据治理的灵魂:五大体系


1.数据治理组织体系



一谈到数据治理,必须先谈组织体系。数据治理项目的实施绝非是一个部门的事情,不能在企业的单一部门得到解决,必须由上往下统筹,建立专业的数据治理组织体系,确定对数据进行管理的责权利,即数据的产生者、使用者、拥有者和管理者;明确相应的治理制度和标准,培养整个组织的数据治理意识。

可以说,企业高层的直接领导和积极参与,对数据管理组织的成功至关重要。企业数据治理是应有高层领导牵头,业务部门负责,信息部门执行,企业全员的参与。企业全员应培养起数据思维和数据意识,当然这是一个长期的过程,也是一件很不容易的事情,需要一点一滴的积累沉淀,并不断融入企业文化中。

2.数据治理标准体系


数据治理的标准体系是多个层面的,包括:国际标准、国家标准、行业标准、企业标准等。企业数据标准体系内容应涵盖:元数据标准、主数据标准、参照数据标准、数据指标标准等。数据治理的成效,很大程度上取决于数据标准的合理性和统一实施的程度。企业数据标准体系的建设应既满足当前的实际需求,又能着眼未来与国家及国际的标准接轨。



3.数据治理流程体系


要真正把数据作为企业有价值的资产来管理,就必须像管理财务、人力资源等业务功能一样进行数据治理,这就要求企业需要在明确数据治理管控目标的基础上,建立数据治理相关的工作流程。


数据治理流程体系,为数据治理的开展提供有据可依的管理办法、规定数据治理的业务流程、数据治理的认责体系、人员角色和岗位职责、数据治理的支持环境和颁布数据治理的规章制度、流程等。数据治理是建立数据的生产、流转、使用、归档、消除的整个生命周期管理的过程,企业应围绕数据治理的对象:数据质量、数据标准、主数据、元数据、数据安全等内容建立相应的制度和流程。


4.数据治理评价体系


建立数据评价与考核体系是企业实施和贯彻数据治理相关标准、制度和流程的根本。建立明确的考核制度,实际操作中可根据不同企业的具体情况和企业未来发展要求建立数据的认责体系,设置考核指标和考核办法,并与个人绩效挂钩。考核指标包括两个方面内容,一方面是对数据的生产、管理和应用等过程的评估和考核指标,另一方面是数据质量的评测指标。


5.数据治理技术体系


数据治理包括数据治理的工具和技术,总体应包括元数据管理、主数据管理、数据标准管理、数据质量管理和数据安全管理等。合理引入技术工具,能提升效率,节省人力成本。亿信华辰旗下睿治数据治理平台正是融合数据集成、数据交换、实时计算存储、元数据管理、数据标准管理、数据质量管理、主数据管理、数据资产管理、数据安全管理、数据生命周期管理十大产品模块,打通数据治理各个环节,十大产品模块可独立或灵活组合使用,快速满足政府、企业各类不同的数据治理场景。


 亿信华辰睿治数据治理平台架构图

元数据管理:对企业涉及的业务元数据、技术元数据、管理元数据进行盘点、集成和管理,并面向开发人员、最终用户提供元数据服务,以满足用户的业务需求。 

数据标准管理:数据标准适用于业务数据描述、信息管理及应用系统开发,可以作为经营管理中所涉及数据的规范化定义和统一解释,也可作为信息管理的基础,同时也是作为应用系统开发时进行数据定义的依据。

主数据管理:主数据管理涉及主数据的所有参与方,如用户、应用程序、业务流程等,创建并维护企业核心数据一致性、完整性、关联性和正确性。

数据质量管理:建立数据质量管理体系,明确数据质量管理目标、控制对象和指标、定义数据质量检验规则、执行数据质量检核,生产数据质量报告。通过数据质量问题处理流程及相关功能实现数据质量问题从发现到处理的闭环管理,从而促进数据质量的不断提升。

数据安全管理:数据安全应贯穿数据治理全过程,应保证管理和技术两条腿走路。从管理上,建立数据安全管理制度、设定数据安全标准、培养起全员的数据安全意识。从技术上,数据安全包括:数据的存储安全、传输安全和接口安全等。



  02  
数据治理典型框架:经典可参考


一个好的框架能够帮我们对复杂模糊的概念做清晰的梳理,明确目标与行动计划,提高项目成功率。目前国内外权威机构已总结了一些数据治理框架,推荐给大家参考:


1.国际数据管理协会DAMA数据治理框架



DAMA 首先总结了数据管理的十大功能,主要包括数据治理、数据架构管理、数据开发、数据操作管理、数据安全管理、参考数据和主数据管理、数据仓库和商务智能管理,并把数据治理放在核心位置;然后详细阐述了数据治理的七大环境要素,即目标和原则、活动、主要交付物、角色和责任、技术、实践和方法、组织和文化;最终建立起十大功能和七大环境要素之间的对应关系,认为数据治理的重点就是解决十大功能大环境要素之间匹配问题

2.国际数据治理研究所DGI数据治理框架



DGI数据治理模型,采用5W1H法则进行设计,分为组织架构、规则条例、治理流程三个层面。5W1H在数据治理模型中的应用:WHO,数据利益相关者;WHAT,数据治理的作用;WHEN,何时开展数据治理;WHERE,数据治理位于何处(当前的成熟度级别);WHY,为什么需要数据治理框架;HOW,如何开展数据治理。

3.Gartner数据治理模型


Gartner提出了数据治理与信息管理的参考模型,将数据治理分为四个部分:规范、计划、建设和运营。Gartner数据治理模型的四个部分定义了企业数据治理的四个阶段重点应关注的内容。

4.DCMM数据治理体系框架



DCMM国家标准结合数据生命周期管理各个阶段的特征,按照组织、制度、流程、技术对数据管理能力进行了分析、总结,提炼出组织数据管理的八大过程域,并对每项能力域进行了二级过程项(28个过程项)和发展等级的划分(5个等级)以及相关功能介绍和评定指标(441项指标)的制定。
结语:由于企业性质、业务特点、管理模式的不同,企业在开展数据治理工作的时候,最好将现有成果进行研究整合,结合企业自身的特点,引入专业数据治理公司或专家,建立符合现状和需求的可落地的数据治理框架,指导企业数据治理工作的开展。只有这样才能形成企业数据治理的驱动力,有效发挥企业数据资产的价值,引领企业在数字化转型的道路上不断前进。
第 211 篇  让数据驱动进步
—— END ——


更多精彩内容:

1.2022 数据治理领域十大关键词!

2.59页PPT | 银行大数据治理平台建设方案(附下载)

3.做数据治理前,必须了解并避开的十大坑

4.关于数据治理,你需要知道的一些基本概念

5.元数据管理——企业数据治理的基石

6.电力行业如何做好数据治理,其核心的3个步骤

7.一文详解医疗机构数据治理六大核心环节|推荐收藏

8.政务行业数据治理存在哪些问题,该如何应对?

9.数据治理:数据标准建设方法和流程

10.最终有人把数据治理的元数据、主数据等概念讲明白了

点击
阅读原文

申请亿信产品试用



推荐阅读
  • 携手生态伙伴,希捷发布银河X16数据存储方案
    2019年6月26日,希捷科技在北京举办“容海量数据筑云之基石”——2019希捷科技企业级生态合作伙伴沟通会暨银河ExosX16新品发布会。在本次发布会上࿰ ... [详细]
  • 起底▍Spring Boot/Cloud背后豪华的研发团队 ——独角兽公司Pivotal
    作者|纯洁的微笑编辑|梅花鹿36大数据已获得授权转载我们刚开始学习SpringBoot的时候肯定都会看到这么一句话:SpringBoot是由Pivotal团队提供的全 ... [详细]
  • 寻求更强大的身份和访问管理(IAM)平台的企业正在转向云,并接受身份即服务(IDaaS)的灵活性。要为IAM选择正确的场外解决方案,业务管理人员和IT专业人员必须在实施之前评估安全 ... [详细]
  • hdfs数据节点分发什么协议_HDFS主要节点解说(一)节点功能
    HDFS是一个主从(MaterSlave)体系结构。从终于用户的角度来看,它就像传统的文件系统一样,能够通过文件夹路径对文件运行CRUD(Create、 ... [详细]
  • 每日一书丨AI圣经《深度学习》作者斩获2018年图灵奖
    2019年3月27日——ACM宣布,深度学习之父YoshuaBengio,YannLeCun,以及GeoffreyHinton获得了2018年的图灵奖, ... [详细]
  • IIS6.0提供一个重新设计的万维网发布服务(WorldWideWebPublishingService)架构,可以帮助你为你的网站构建更好的性能、可靠、可扩展性(scalabil ... [详细]
  • 阿里p8用端午节3天假期整理出了Spring Cloud知识点大全,太全了
     前言:今天一觉起来,发现我们开工的日期又延迟了,虽然已经在家办公一个多礼拜了,但是由于家里的环境还是不能有很高的效率。于是干脆就对SpringCloud的一些知识点做了一些整理。 ... [详细]
  • 数据模型:数字化转型的核心能力
    前言业界数字化转型已经进入深水区,数据越来越受到大家重视,由于数据中台等等概念的兴起,大 ... [详细]
  • 用友深耕烟草行业25年,提出数字化转型建议
    本文介绍了用友在烟草行业深耕25年的经验,提出了数字化转型的建议,包括总体要求、主要任务、发展阶段和六位一体推进举措。通过数字化转型,烟草行业将注入新动能,实现高质量发展。 ... [详细]
  • 云原生边缘计算之KubeEdge简介及功能特点
    本文介绍了云原生边缘计算中的KubeEdge系统,该系统是一个开源系统,用于将容器化应用程序编排功能扩展到Edge的主机。它基于Kubernetes构建,并为网络应用程序提供基础架构支持。同时,KubeEdge具有离线模式、基于Kubernetes的节点、群集、应用程序和设备管理、资源优化等特点。此外,KubeEdge还支持跨平台工作,在私有、公共和混合云中都可以运行。同时,KubeEdge还提供数据管理和数据分析管道引擎的支持。最后,本文还介绍了KubeEdge系统生成证书的方法。 ... [详细]
  • 项目运行环境配置及可行性分析
    本文介绍了项目运行环境配置的要求,包括Jdk1.8、Tomcat7.0、Mysql、HBuilderX等工具的使用。同时对项目的技术可行性、操作可行性、经济可行性、时间可行性和法律可行性进行了分析。通过对数据库的设计和功能模块的设计,确保系统的完整性和安全性。在系统登录、系统功能模块、管理员功能模块等方面进行了详细的介绍和展示。最后提供了JAVA毕设帮助、指导、源码分享和调试部署的服务。 ... [详细]
  • 开足马力“拼经济” 闯出崭新“精气神”
    开足马力“拼经济” 闯出崭新“精气神” ... [详细]
  • 2018年数字化转型调查
    PointSource发布了2018年数字化转型调查,主要发现包括:1、由于缺乏战略,企业迫切需要进行数字化转型。2、企业急于开始数字化转型过程,但他们缺乏进行智能投资的战 ... [详细]
  • 老牌医药收割AI红利:先投个15亿美元抢中国人才
    萧箫发自凹非寺量子位报道|公众号QbitAI没想到,一场大会把我的“刻板印象”攻破了。2021世界人工智能大会现场,能看见不少熟悉的身影, ... [详细]
  • BPM是什么软件?1、BPM是BusinessProcessManagement的简称,译为业务流程管理,它是一种以规范化的构造端到端的卓越业务流程为中心以持续的提高组织业务绩效为 ... [详细]
author-avatar
无敌lili699_461
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有