数据仓库层从上到下,又可以分为3个层:数据细节层DWD、数据中间层DWM、数据服务层DWS。 数据细节层DWD 数据细节层:data warehouse details,DWD 该层是业务层和数据仓库的隔离层,保持和ODS层一样的数据颗粒度;主要是对ODS数据层做一些数据的清洗和规范化的操作,比如去除空数据、脏数据、离群值等。 为了提高数据明...
目前比较成熟的数据分层:数据运营层ODS、数据仓库层DW、数据应用层ADS(APP)。数据仓库层又可以分为3个层:数据细节层DWD、数据中间层DWM、数据服务层DWS。 一、ODS层 ODS层(Operation Data Store )数据准备区,也称为贴源层。数据源中的数据,经过抽取、洗净、传输,也就是ETL过程之后进入本层。通常包含多个数据源...
4. ADS(Application Data Store)——应用数据层 ADS是数据仓库面向最终用户的核心层,它直接服务于具体业务场景 4.1 ADS是什么? ADS(应用数据层)是数据仓库中的“成品库”,它是面向具体应用场景的数据集。ADS通常是为了解决特定业务需求而设计的,数据经过高度聚合和加工,直接支持报表生成、业务应用和高级分析。 4.2 ...
3. DWD(Data Warehouse Detail):数据仓库明细层,用于存储详细、完整的数据,支持企业数据的跨部门和跨系统共享和查询。 4. DWS(Data Warehouse Summary):数据仓库汇总层,用于提供业务汇总分析服务,对原始数据进行聚合计算和加工,供企业决策层使用。 5.ADS(ApplicationData Service):应用数据服务,用于存放数据产品个性化...
ODS、DWD 和 ADS 是数据仓库中的常见术语,代表了不同的数据处理层次和目标: ODS(Operational Data Store):操作型数据存储层。ODS是一个面向业务操作的数据存储区域,用于保留从源系统抽取的原始数据。ODS通常用于支持实时或近实时的查询和报表需求,并提供对源系统数据的快速访问和响应。
这是一张典型的数据仓库架构图。按自下而上的顺序,分别为数据仓库ETL(Extract-Transform-Load)层、ODS(Operational Data Store)层、CDM(Common Dimensional Model)层和ADS(Application Data Store)层。其中CDM层主要包括DWD层(Data Warehouse Detail)和DWS层(Data Warehouse Summary)两部分。
这是一张典型的数据仓库架构图。按自下而上的顺序,分别为数据仓库ETL(Extract-Transform-Load)层、ODS(Operational Data Store)层、CDM(Common Dimensional Model)层和ADS(Application Data Store)层。其中CDM层主要包括DWD层(Data Warehouse Detail)和DWS层(Data ...
这是一张典型的数据仓库架构图。按自下而上的顺序,分别为数据仓库ETL(Extract-Transform-Load)层、ODS(Operational Data Store)层、CDM(Common Dimensional Model)层和ADS(Application Data Store)层。其中CDM层主要包括DWD层(Data Warehouse Detail)和DWS层(Data Warehouse Summary)两部分。
数据仓库分层是构建数据仓库系统的重要概念，主要分为ODS、DW、DWD、DWS和ADS五个层次。ODS（Operational Data Store）作为基础层，主要用于存储从各个操作系统的原始数据。这一层的数据未经清洗和处理，直接从源头获取，为后续的数据处理提供基础。DW（Data Warehouse）作为数据仓库层，经过结构化、清洗和聚合...