1.1 全局数据字典及维护
数据字典作为数据仓库的重要组成部分,存储很多数据资产信息。如数据源、表定义、表结构定义、用途定义、数据量、表元数据、存储以及关联关系等。
1.1.1 全局表定义
存储数据源、表用途、表结构等。结合一期的经验,已经得到了hive数据库、OceanBase、Gbase的所有表结构及用户的信息,且把这些信息已经用到了大数据平台的数据资产模块。
1.1.2 全局表存储
顾名思义就是存储源端表的一些元数据信息,比如hive源端表的行数rows、分区数partitions、文件数file_num、文件size,以及OceanBase的行数rows、分区数partitions、表大小size及gbase的一些信息。
综上的信息已经用到了大数据平台数据资产模块。
1.1.3 全局字典视图DICT
此借鉴Oracle的定义,顾名思义就是全局的数据字典,一个自我提醒的工具,当不知道用什么字典或者转码的码表的时候,可以查它。
具体包含信息: