7-3 翼支付数据治理实践之元数据管理 - 王平

翼支付数据治理实践之元数据管理

数据治理与元数据治理

• 数据治理：通过资产元数据识别数据表价值，通过数据血缘识别任务链路，推进核心/低价值任务治理。
• 元数据治理：提升数据一致性和数据质量，降低数据安全风险。
• 主要问题：数据质量和时效不高、核心数据识别困难、数据治理前清后乱、数据安全风险高、数据开发烟囱化。

元数据治理体系

• 核心数据保障：支持多租户及资源分配，控制队列资源、优先级及任务启动时间。
• 主数据治理：确保主数据的唯一性和权威性，建立严格的数据稽核机制。
• 数据规范体系：建立数据开发、数据权限、数据安全等规范。
• 产品架构：包括元数据查询、血缘分析、数据目录、报表与可视化等功能模块。

元数据平台技术介绍

• 系统架构：接收层、服务层、存储层。
• 元数据模型：基础资产、安全、血缘。
• 元数据采集：全链路血缘。

未来展望

• 支持多源异构数据管理：多集群跨数据中心容灾。
• 智能推荐：提升数据治理效率和效果。

关键数据和重点内容

• 数据质量和时效性提升：通过资源分配和优先级管理。
• 主数据治理：确保数据唯一性和权威性。
• 数据规范体系：建立全面的数据开发和安全规范。
• 技术架构：高效的数据采集和全链路血缘分析。
• 未来展望：支持多源异构数据管理和智能推荐。