如何让数据治理快速出成效——反向治理,以终为始

2024-08-30 17:28

本文主要是介绍如何让数据治理快速出成效——反向治理,以终为始,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

数据治理有不少知名的方法和框架,如DAMA、DGI、CMMI-DMM、DCMM、ITSS数据治理框架等。这些数据治理方法和框架,从战略到落地都提出来完善的体系,但是按照这些方法和框架实施的,却鲜有成功案例。究其问题无非在于:

一、体系框架过于复杂,涉及组织、流程制度、标准规范、技术平台等诸多方面,难于协调和管控。

二、过于依靠专家设计,数据治理项目往往集中很多来自于内外部的技术专家、管理专家、业务专家等,企图通过专家们的调查、研讨设计出一套完美的数据治理体系出来。这几乎是不可能完成的任务,因为要组建能从广度和深度方面都能完全覆盖的专家团队就基本不可能,再者时间、资源总是有限的。

三、以出文件解决问题,数据治理确实需要产出标准规范、流程制度、组织架构等文件,但出文件就结束了,没有客观、持续、有效的手段进行保障文件的执行,不能解决实际问题。

四、以建系统解决问题,也有不少单位数据治理仅仅定义为咨询,提出一套体系框架,规划出一系列系统建设,认为只要建设了相关系统就能解决数据问题。比如财务科目、客商信息、物料编码,认为上一套主数据系统就解决了,而实际的情况,上了主数据系统的单位,各业务系统中主数据依然存在不一致问题。

五、 以规划思路自顶向下而行,缺少抓手、范围无限扩大、具体问题轻拿轻放。

那么,是不是由于数据治理的复杂性,如果按照以前的方法去做,就一定会出范围广、周期长、投入大、见效慢等问题。

鲁四海团队根据十多年的数据治理经验,也就是十多年的填坑经历,提出了“反向治理,以终为始”的数据治理方法,解决了数据治理缺少抓手、投入大、见效慢的问题。

“反向治理,以终为始”是在吸收了DAMA、DGI等优秀数据治理框架基础上,突出落地性和技术融合性,以结果为导向持续迭代的方法。整体框架如下图所示:

6b92918d3176f2a88942eb87be3a6110.jpeg

“反向治理”的特点:

一、抓手在“数据仓库”,即先建设数据仓库,将分散在业务系统数据库、接口的数据集中到数据仓库进行碰撞,提出基于现状的数据模型。

二、“目标导向,兼顾先进性”,通过对数据产品(数据的应用,比如报表、报告、API接口等)的梳理,扩展数据模型,使得数据模型具备满足更多应用场景的先进性。

三、数据质量“以终为始”,数据质量是数据治理的目标,以数据仓库建模开始,基于数据模型,通过MPP数据仓库的高性能,快速定位数据质量问题,并以此开始数据治理任务实施,形成“质量反馈——治理改进”的循环迭代,让数据问题收敛。

四、解决标准规范,与实际系统、业务需求偏离问题。通过现有数据碰撞和数据应用目标的分析,提出的数据模型,在模型基础上提出的标准规范,不再空洞。

五、流程制度和组织改进的依据来源于数据仓库得出的标准规范和质量报告,所以在和各部门研讨时有理有据,避免传统数据治理研讨中“只有定性问题,没有定量问题;只有宏观问题,没有具体问题”的尴尬。

这篇关于如何让数据治理快速出成效——反向治理,以终为始的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1121466

相关文章

使用Python实现快速搭建本地HTTP服务器

《使用Python实现快速搭建本地HTTP服务器》:本文主要介绍如何使用Python快速搭建本地HTTP服务器,轻松实现一键HTTP文件共享,同时结合二维码技术,让访问更简单,感兴趣的小伙伴可以了... 目录1. 概述2. 快速搭建 HTTP 文件共享服务2.1 核心思路2.2 代码实现2.3 代码解读3.

Java利用JSONPath操作JSON数据的技术指南

《Java利用JSONPath操作JSON数据的技术指南》JSONPath是一种强大的工具,用于查询和操作JSON数据,类似于SQL的语法,它为处理复杂的JSON数据结构提供了简单且高效... 目录1、简述2、什么是 jsONPath?3、Java 示例3.1 基本查询3.2 过滤查询3.3 递归搜索3.4

springboot security快速使用示例详解

《springbootsecurity快速使用示例详解》:本文主要介绍springbootsecurity快速使用示例,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝... 目录创www.chinasem.cn建spring boot项目生成脚手架配置依赖接口示例代码项目结构启用s

MySQL大表数据的分区与分库分表的实现

《MySQL大表数据的分区与分库分表的实现》数据库的分区和分库分表是两种常用的技术方案,本文主要介绍了MySQL大表数据的分区与分库分表的实现,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有... 目录1. mysql大表数据的分区1.1 什么是分区?1.2 分区的类型1.3 分区的优点1.4 分

Mysql删除几亿条数据表中的部分数据的方法实现

《Mysql删除几亿条数据表中的部分数据的方法实现》在MySQL中删除一个大表中的数据时,需要特别注意操作的性能和对系统的影响,本文主要介绍了Mysql删除几亿条数据表中的部分数据的方法实现,具有一定... 目录1、需求2、方案1. 使用 DELETE 语句分批删除2. 使用 INPLACE ALTER T

Python Dash框架在数据可视化仪表板中的应用与实践记录

《PythonDash框架在数据可视化仪表板中的应用与实践记录》Python的PlotlyDash库提供了一种简便且强大的方式来构建和展示互动式数据仪表板,本篇文章将深入探讨如何使用Dash设计一... 目录python Dash框架在数据可视化仪表板中的应用与实践1. 什么是Plotly Dash?1.1

Redis 中的热点键和数据倾斜示例详解

《Redis中的热点键和数据倾斜示例详解》热点键是指在Redis中被频繁访问的特定键,这些键由于其高访问频率,可能导致Redis服务器的性能问题,尤其是在高并发场景下,本文给大家介绍Redis中的热... 目录Redis 中的热点键和数据倾斜热点键(Hot Key)定义特点应对策略示例数据倾斜(Data S

Python实现将MySQL中所有表的数据都导出为CSV文件并压缩

《Python实现将MySQL中所有表的数据都导出为CSV文件并压缩》这篇文章主要为大家详细介绍了如何使用Python将MySQL数据库中所有表的数据都导出为CSV文件到一个目录,并压缩为zip文件到... python将mysql数据库中所有表的数据都导出为CSV文件到一个目录,并压缩为zip文件到另一个

SpringBoot整合jasypt实现重要数据加密

《SpringBoot整合jasypt实现重要数据加密》Jasypt是一个专注于简化Java加密操作的开源工具,:本文主要介绍详细介绍了如何使用jasypt实现重要数据加密,感兴趣的小伙伴可... 目录jasypt简介 jasypt的优点SpringBoot使用jasypt创建mapper接口配置文件加密

使用Python高效获取网络数据的操作指南

《使用Python高效获取网络数据的操作指南》网络爬虫是一种自动化程序,用于访问和提取网站上的数据,Python是进行网络爬虫开发的理想语言,拥有丰富的库和工具,使得编写和维护爬虫变得简单高效,本文将... 目录网络爬虫的基本概念常用库介绍安装库Requests和BeautifulSoup爬虫开发发送请求解