数据仓库建设浅析-ODS层

ODS层（数据集合）

数据从源数据层经过简单的清洗后，或者不经过清洗直接搬运后就到了ODS。

ODS层的功能是：

1，为S_DW层提供数据

2，为查询分析层提供明细数据查询

3， 隔离了分析系统与业务系统，保证了业务系统的安全性，减轻了业务系统的压力。

ODS层数据的特点是：

1，数据内容与源数据层完全一样或基本一致。

2，数据是明细的，粒度最低的。

3，数据是面向主题存储的。

4，数据是反映历史变化的

5，数据是稳定的。

ODS层数据的生命周期： 一天

数据从ODS层加工到S_DW层过程中：

1，etl工具的使用：

建议用procedure,function,UDF等来完成。

1，优点是：效率高，软件费用低，无需额外第三方etl工具的技术支持。

2， 缺点是：不便于开发，维护；调度，运行的可监控性较差。

2，工作内容分析：

本阶段的目的是清洗，整合，加工数据。对应于ETL的T，即加工。由于ODS层的每个表数据量都相对较小，故本层中适合做加工处理，多表的关联等。在建好模型的基础上，本部分的开发工作量不是太大。本层的数据依赖于源数据层的数据，而且加工处理较多。故数据加工时间可能比较大。