优秀可靠的数仓体系,需要良好的数据分层结构。合理的分层,能够使数据体系更加清晰,使复杂问题得以简化。以下是该项目的分层规划。 1 设计要点 (1)ODS层的表结构设计依托于从业务系统同步过来的数据结构 (2)ODS层要保存全部历史数据,故其压缩格式应选择压缩比较高的,此处选择gzip (3)ODS层表名的命名规范为:ods_表名_单分区增量全量标识(inc/full)。 2 相关表 2.1 整车日志表(增量日志表) CREATE EXTERNAL TABLE ods_car_data_inc ( `vin` STRING COMMENT '汽车唯一ID', `car_status` INT C...