数据中台(大数据平台)之元数据管理

2024-07-31 18:20 浏览量:247

元数据管理是数据管理的基础,数据中台产品要能够提供各类元数据采集的适配器,自动化采集技术元数据,并在技术元数据的基础上补充管理属性和业务属性,为后续的数据资源目录、数据安全管控、报表开发提供统一的口径。并能够在数据集成和数据清洗加工流程的基础上自动分析元数据的血缘关系和影响关系。

 

1.数据资产地图:基于全局元数据信息,对数据源个数、物理表个数、元数据数量等内容进行量化,增强对元数据结构的感知。  

可视化呈现数据库、物理表以及元数据之间的关系图谱,使用不同颜色将不同主题的数据库(来源库、贴源库、治理库、应用库、共享库)进行区分,展现数据分布结构。提供页面交互手段,点击查看数据资源下钻信息,直观了解数据血缘、数据流向、以及产生变更时会发生的影响。

 

图-数据资产地图

 

2.元数据检索:元数据的检索和应用支持以元数据编码、字段名称、业务名称、英文名称等属性检索元数据,以及查看元数据的基本信息、详细信息、血缘分析、影响分析、全链分析和标准化差异。

 

3.元数据管理:元数据基本信息的维护功能,包括对元数据基本信息、血缘关系、影响关系进行管理,能够标识核心元数据。

 

4.元数据自动采集:数据中台提供各类异构元数据的自动采集,内置常见数据源的适配器,支持常见的关系型数据库的元数据自动采集,并支持配置采集任务。

针对不同数据源的元数据采集任务配置不同的执行策略,包括手工执行、定时执行、指定时间执行、时间间隔执行以及按照天、周、月配置执行时间。支持批量导入和手工维护元数据,提供新增、删除、修改元数据功能。

 

5.元数据变更日志:支持查看元数据的变更日志,包含新增表、修改表、新增字段、删除字段等操作,方便对数据库变更追踪管理。

 

 

上一篇:数据资产入表的数据质量评估

下一篇:数据共享交换平台之数据资源目录

  • 分享:
龙石数据
咨询电话: 0512-87811036,18013092598
联系我们
商务联系微信

商务联系微信

0512-87811036,

18013092598

咨询电话