元数据管理
元数据管理用于登记、采集、组织和查询数据库对象、报表、文件、API 及企业自定义对象等元数据,并提供从元数据对象出发的基础血缘查看。
“元数据”是描述数据资源本身的信息,例如表和字段的名称、结构、来源、含义和责任归属;采集或编辑这些描述不等于读取、修改表中的业务记录。需要管理企业特有对象的结构时,再阅读元模型。
当前模块按三个工作区组织入口:
| 工作区 | 页面 | 主要用途 |
|---|---|---|
| 元数据 | 元数据概览、数据集、报表、文件 | 查询已经登记或采集的对象 |
| 采集管理 | 应用系统、数据源、采集管理、元模型 | 准备来源并运行采集 |
| 血缘管理 | 血缘空间、预处理管理、命名空间管理 | 管理元数据侧的基础血缘关联 |
元数据概览、采集管理和各查询入口解决的问题不同:先准备来源与插件,再选择采集类型并运行任务,最后按对象类型到“数据集”“报表”或“文件”查看结果。采集时选择了“文件”,不代表结果一定出现在“文件”栏目;数据字典、DDL 和 API 元数据会被解析成结构化对象。
先判断采集对象和查询位置
| 要接入的内容 | 采集入口 | 采集结果主要在哪里查询 |
|---|---|---|
| 关系型数据库、非关系型数据库或数据库平台 | 数据源 | “数据集”:数据源、表、字段、视图、存储过程、函数等 |
| FineBI、FineReport、SmartBI 等受支持的 BI 报表 | 报表 | “报表” |
| DAM 新建或导入、SQLink“报表管理”导入的自定义报表 | 报表模块手工维护 | “报表” |
| DDM 导出的物理/逻辑数据字典、DDL 文件 | 文件 | 解析后进入“数据集”,原始文件不作为“文件”栏目中的资产展示 |
| 文件存储服务器中的文件 | 文件 | “文件” |
| API 元数据或其他按元模型定义的对象 | 文件、数据源或元模型对应方案 | 结构化对象进入“数据集” |
如果不确定入口,先阅读配置元数据采集中的采集决策表,再执行任务。
数据模型的设计、比对和同步请参考 DDM 产品用户手册。模型发生变更后,应在 DAM 中重新采集并复核元数据、标准映射和血缘关系。
阅读路线
第一次使用先完成快速开始。日常任务按下表进入。
| 目标 | 操作指南 |
|---|---|
| 准备系统与连接 | 应用系统与数据源 |
| 接入数据库、报表、文件或元模型对象 | 配置采集 |
| 为数据库采集准备最小权限账号 | 数据源采集账号权限 |
| 查找、编辑、导出和批量更新对象 | 表与字段元数据 |
| 维护对象、报表、文件和模型变更后的元数据 | 元数据对象维护 与 模型变更复核 |
| 统一字段含义和值域 | 关联数据标准 |
| 管理报表与文件对象 | 报表与文件 |
| 从对象查看上下游 | 基础血缘 |
| 扩展企业特有资产结构 | 设计元模型 |
| 理解预置模型和自定义模型 | 元模型概念 |
| 按自定义结构录入对象 | 采集自定义元模型数据 |
| 检查模板导入与血缘同步 | 元模型导入 |
查看元数据概览
概览按系统、采集、标准、规则和报表等维度展示统计,可在编辑模式调整组件与布局。统计依赖后台计算任务,不应以刚保存后的概览数值替代采集结果核对。
常用口径包括:接入率为已有数据源的应用系统数占全部应用系统数;标准覆盖率为已关联标准字段数占全部字段数;标准核标率为完全映射字段数占已关联标准字段数。应用系统下的数据源统计只计入已采集元数据的来源。
与 SQLink 的边界
元数据管理中的血缘用于从元数据对象查看上下游关系。“血缘管理”License 不等同于 SQLINK License;血缘地图、应用场景、专业解析和影响分析等完整能力参见数据血缘。
