首页 > 常见问题 > 对数据进行etl加工的数据层是什么

对数据进行etl加工的数据层是什么

青灯夜游
发布: 2023-01-13 00:39:06
原创
3707 人浏览过

对数据进行etl加工的数据层是:数据加载层。ETL是将业务系统的数据经过抽取、清洗转换之后加载到数据仓库的过程,目的是将企业中的分散、零乱、标准不统一的数据整合到一起,为企业的决策提供分析依据。

对数据进行etl加工的数据层是什么

本教程操作环境:windows10系统、Dell G3电脑。

对数据进行etl加工的数据层是:数据加载层。

ETL(Extract-Transform-Load,数据仓库技术),是将业务系统的数据经过抽取(extract)、清洗转换(transform)之后加载(load)到数据仓库的过程,目的是将企业中的分散、零乱、标准不统一的数据整合到一起,为企业的决策提供分析依据, ETL是BI(商业智能)项目重要的一个环节。

数据仓库各层说明:

1、数据加载层:ETL(Extract-Transform-Load)

2、数据运营层:ODS(Operational Data Store)

3、数据仓库层:DW(Data Warehouse)

  • 数据明细层:DWD(Data Warehouse Detail)

  • 数据中间层:DWM(Data WareHouse Middle)

  • 数据服务层:DWS(Data WareHouse Service)

4、数据应用层:APP(Application)

5、维表层:DIM(Dimension)

1.png

分层好处:

  • 清晰数据结构:每一个数据分层都有它的作用域和职责,在使用表的时候能更方便地定位和理解

  • 减少重复开发:规范数据分层,开发一些通用的中间层数据,能够减少极大的重复计算

  • 统一数据口径:通过数据分层,提供统一的数据出口,统一对外输出的数据口径

  • 复杂问题简单化:将复杂的任务分解成多个步骤来完成,每一层只处理单一的步骤,比较简单和容易理解。当数据出现问题之后,不用修复所有的数据,只需要从有问题的步骤开始修复。

  • 屏蔽原始数据的异常:不必改一次业务就需要重新接入数据。

更多相关知识,请访问常见问题栏目!

以上是对数据进行etl加工的数据层是什么的详细内容。更多信息请关注PHP中文网其他相关文章!

相关标签:
来源:php.cn
本站声明
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn
热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板