第二章-AllData数据中台-数据治理功能

AllData公司负责人

已于 2024-06-05 13:36:02 修改

阅读量5.2k

点赞数 3

分类专栏： AllData数据中台知识星球 AllData数据中台商业版专栏文章标签： github 开源大数据

于 2023-01-03 19:19:50 首次发布

本文链接：https://blog.csdn.net/AllDataDC/article/details/128537780

版权

AllData数据中台商业版专栏同时被 2 个专栏收录

17 篇文章 ¥399.90 ¥499.90

订阅专栏

AllData数据中台知识星球

16 篇文章 ¥399.90 ¥499.90

订阅专栏

AllData数据中台通过其数据治理功能，实现大数据治理平台方案设计，核心价值在于数字化方案的集成能力。平台旨在提供一站式的开发与治理体验，通过扩展链接集成如代码仓库、监控页面等外部服务，实现统一管理和自动化应用，提升数据服务的价值。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

一、AllData数据治理功能

数据平台的数据治理：数据治理是一个大而全的治理体系。
需要数据质量管理、元数据管理、主数据管理、模型管理管理、数据价值管理、
数据共享管理和数据安全管理等等模块是一个活的有机体。

1、数据质量: 依托Griffin平台，为您提供全链路的数据质量方案，
包括数据探查、对比、质量监控、SQL扫描和智能报警等功能：

开源方案： Apache Griffin + ES + SparkSql

2、元数据: 描述数据的数据，对数据及信息资源的描述性信息，
例如字段元数据描述字段的类型、长度、默认值。 
发布：指将某一元数据发布为数据资产的动作。
数据资产是指可以对外提供服务并且产生价值的数据。
表/字段血缘：即表/字段的来龙去脉，
主要包含表/字段的来源、加工方式、映射关系及数据出口。
血缘是元数据的一部分，有利于数据变更影响分析以及数据问题排查。

开源方案： Apache Atlas + ES + Hbase + JanusGraph + Hive + Kafka

3、数据标准: 参考阿里的DataWorks，
数据标准是用于描述公司层面需共同遵守的数据含义和业务规则，
它描述了公司层面对某个数据的共同理解，
这些理解一旦确定下来，就应作为企业层面的标准在企业内被共同遵守。
数据标准，也称数据元࿰

了解本专栏