目录
1 开发规范
1.1 表命名规范
(1) ODS层:
增量表:ods_{来源数据库缩写}_源数据库表名_inc
全量表:ods_{来源数据库缩写}_源数据库表名.
(2) DIM层:{模型层级}_{业务板块}_{主题域}_{自定义标签}.
1.2 字段
①字段值按最小单位保存,如时间保留到秒.
②各层表增加数据处理时间,取当前系统时间.
1.3 数据表
①ADS层优先调用DWS层数据,不能直接调用ODS层数据.
2 优化
2.1 字段
①删除没有用途的字段.
②不要为了方便而都使用string类型.
③复合指标字段尽量在DWS层才添加.
④通过字段冗余,减少表连接的数量.
2.2 数据表
①如果数据源的数据量很大,可将数据同步到不同分区,例如时间分区.
②通过增加汇总表,减少数据的动态汇总.
版权声明:本文为weixin_43875878原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接和本声明。