时间:2025-04-30 15:00:31
ods层和dwd层的区别
ODS层和DWD层是数据仓库中两个不同的层,它们的主要区别在于数据内容和处理方式上。
1. ODS层:操作数据层,它直接映射操作数据(原始数据),数据备份。
2. DWD层:数仓明细层,它是对ODS层数据进行ETL处理后的扁平化明细数据。
DWD层的数据内容是经过清洗过滤、数据解析、SESSION分割、数据规范处理等步骤处理后的数据。而ODS层的数据内容是直接从外部数据源ETL到数仓体系之后的表,记录的还是明细数据。
此外,DWD层的存储格式通常为orc/parquet文件格式,存储周期为6个月。而ODS层的存储周期相对较短,视数据规模,增长速度,以及业务的需求而定。
《数据仓库ods层和dw层的区别》不代表本网站观点,如有侵权请联系我们删除