- 1
- 2
- 3
- 4
- 5
数据血缘关系记录规范
资料介绍
一、数据血缘关系定义
数据血缘关系（Data Lineage）是指数据从产生、加工、流转到最终消亡的全生命周期中，各个数据实体之间的依赖关系和衍生路径。它通过记录数据的来源、处理过程和去向，构建数据资产的可追溯链路，为数据治理、质量监控和合规审计提供基础支撑。
二、血缘关系记录核心要素
· 数据实体：包括数据源（如数据库表、文件、API接口）、处理过程（如ETL作业、SQL脚本、算法模型）、目标数据（如报表、数据集市、应用系统）
· 关系类型：包含直接依赖（A直接生成B）、间接依赖（A通过C生成B）、关联关系（A与B存在业务关联）
· 处理逻辑：记录数据转换规则（如字段映射、计算逻辑、过滤条件）、处理时间戳、执行版本
· 元数据属性：数据实体的名称、类型、所属系统、负责人、更新频率等描述信息
三、血缘关系记录方法
1. 技术实现方式
· 静态解析：通过分析SQL脚本、ETL配置文件、代码注释等静态资源，提取表-字段级别的依赖关系
· 动态追踪：在数据处理过程中实时采集执行日志，记录数据流转路径（如Spark作业的DAG图、Flink的数据流）
· 主动上报：通过API接口由数据处理系统主动上报血缘信息至元数据管理平台
部分文件列表
| 文件名 | 大小 |
| 数据血缘关系记录规范.docx | 14K |
最新上传
- 打赏
- 30日榜单
-
21ic小能手 打赏10.00元 2天前
-
21ic小能手 打赏10.00元 3天前
-
21ic小能手 打赏5.00元 3天前
-
21ic下载 打赏310.00元 3天前
用户：江岚
-
21ic下载 打赏310.00元 3天前
用户：mulanhk
-
21ic下载 打赏320.00元 3天前
用户：jh03551
-
21ic下载 打赏220.00元 3天前
用户：jh0355
-
21ic下载 打赏210.00元 3天前
用户：潇潇江南
-
21ic下载 打赏210.00元 3天前
用户：小猫做电路
-
21ic下载 打赏60.00元 3天前
用户：gsy幸运
-
21ic下载 打赏60.00元 3天前
用户：zhengdai
-
21ic下载 打赏60.00元 3天前
用户：lanmukk
-
21ic下载 打赏60.00元 3天前
用户：烟雨
-
21ic下载 打赏20.00元 3天前
用户：w993263495
-
21ic下载 打赏30.00元 3天前
用户：sun2152
-
21ic下载 打赏20.00元 3天前
用户：w178191520
-
21ic下载 打赏20.00元 3天前
用户：liqiang9090
-
21ic下载 打赏20.00元 3天前
用户：xuzhen1
-
21ic下载 打赏35.00元 3天前
用户：有理想666
-
21ic下载 打赏15.00元 3天前
用户：w1966891335
-
21ic下载 打赏15.00元 3天前
用户：x15580286248
-
21ic下载 打赏25.00元 3天前
用户：qiufeng0299
-
21ic下载 打赏15.00元 3天前
用户：kk1957135547
-
21ic下载 打赏10.00元 3天前
用户：qingsong08
-
21ic下载 打赏10.00元 3天前
用户：电工老刘
-
21ic小能手 打赏5.00元 3天前
-
21ic小能手 打赏5.00元 3天前
-
21ic小能手 打赏5.00元 3天前
-
ZENGYIBIN 打赏1.00元 3天前
-
21ic小能手 打赏10.00元 3天前
-
21ic小能手 打赏5.00元 3天前
-
21ic小能手 打赏5.00元 3天前
-
21ic小能手 打赏5.00元 3天前
-
21ic小能手 打赏5.00元 3天前
资料：STM32的数字万用表
-
21ic小能手 打赏5.00元 3天前
-
kuangwy 打赏1.00元 3天前
-
21ic小能手 打赏5.00元 3天前
资料：触控无极台灯控制方案
-
21ic小能手 打赏5.00元 3天前
-
21ic小能手 打赏5.00元 3天前
-
21ic小能手 打赏5.00元 3天前
资料：51单片机的汽车雨刷器
全部评论(0)