gracejpw1117

2020-07-08   阅读量: 1234

大数据

数仓分层结构图

扫码加入数据分析学习群

image.png

ODS 层

原始数据层,存放原始数据,直接加载原始日志、数据,数据保持原貌不做处理。

DWD层

明细数据层

结构和粒度与ods层保持一致,对ods层数据进行清洗(去除空值,脏数据,超过极限范围的数据),也有公司叫dwi。

DWS层

服务数据层

以dwd为基础,进行轻度汇总。一般聚集到以用户当日,设备当日,商家当日,商品当日等等的粒度。

在这层通常会有以某一个维度为线索,组成跨主题的宽表,比如 一个用户的当日的签到数、收藏数、评论数、抽奖数、订阅数、点赞数、浏览商品数、添加购物车数、下单数、支付数、退款数、点击广告数组成的多列表。

ADS层

数据应用层, 也有公司或书把这层成为app层、dal层、dm层,叫法繁多。

面向实际的数据需求,以DWD或者DWS层的数据为基础,组成的各种统计报表。

统计结果最终同步到RDS以供BI或应用系统查询使用。


添加CDA认证专家【维克多阿涛】,微信号:【cdashijiazhuang】,提供数据分析指导及CDA考试秘籍。已助千人通过CDA数字化人才认证。欢迎交流,共同成长!
21.1955 1 2 关注作者 收藏

评论(0)


暂无数据

推荐课程

推荐帖子