目录
版本说明........................................................................................................................................ 3
1. 编写目的.................................................................................................................................... 4
2. 数仓分层.................................................................................................................................... 4
3. 数据分类架构............................................................................................................................ 6
4. 数据处理流程架构.................................................................................................................... 7
5. 数据安全.................................................................................................................................... 7
5.1. 数据采集侧..................................................................................................................... 7
5.2. 数据存储侧..................................................................................................................... 8
5.3. 数据处理侧..................................................................................................................... 9
5.4. 数据交换共享使用侧...................................................................................................... 9
6. 标签系统.................................................................................................................................. 10
6.1. 行为定义....................................................................................................................... 10
6.2. 主要作用....................................................................................................................... 10
6.3. 标签系统两个视角........................................................................................................ 11
6.4. 标签的生命周期............................................................................................................ 11
6.5. 标签的管理机制............................................................................................................ 11
7. 数据划分及命名空间约定....................................................................................................... 13
8. 数据模型.................................................................................................................................. 14
9. 公共规范.................................................................................................................................. 15
9.1. 层次调用约定............................................................................................................... 15
9.2. 公共字段定义规范........................................................................................................ 15
9.3. 数据冗余....................................................................................................................... 15
9.4. 数据拆分....................................................................................................................... 16
10. ODS 层设计规范..................................................................................................................... 16
10.1. 数据同步及处理规范.................................................................................................. 16
10.2. 命名规范..................................................................................................................... 16
10.3. 数据存储及生命周期管理规范..................................................................................17
10.4. 数据质量规范.............................................................................................................. 17
11. CDM 公共维度层设计规范(DIM)........................................................................................... 18
11.1. 设计准则..................................................................................................................... 18
11.2. 表命名规范................................................................................................................. 19
11.3. 数据存储及生命周期管理规范..................................................................................19
12. CDM 明细层设计规范(DWD)................................................................................................. 19
12.1. 表命名规范................................................................................................................. 19
12.2. 数据存储及生命周期管理规范..................................................................................19
12.3. 事务型事实表设计准则.............................................................................................. 20
12.4. 周期快照型事实表...................................................................................................... 20
12.5. 累计快照事实表.......................................................................................................... 20
13. CDM 汇总层设计规范(DWS).................................................................................................. 21
13.1. 命名规范..................................................................................................................... 21