欢迎您访问 最编程 本站为您分享编程语言代码,编程技术文章!
您现在的位置是: 首页

数字仓储建模理论与规范 (II) | 学习笔记 - IV.数据分层架构设计

最编程 2024-03-21 16:59:39
...

关于数据分层,目前占大多数的比较传统的经典的三层模型架构设计以及台内外的分层设计方式都是按照从 ODS 贴原,中间系列的公共层进行一些设计,CDM 层在梳理业务完成后,ADS 层会进行数据整合,针对每一部分业务过程进行分域,并进行中间层明细的事实设计。事实包括两部分,即事实的明细和汇总。在 CDM 之上,会做做很多面向产品、面向业务场景等的应用,即进行偏向业务的应用设计应用层的模型。

以淘宝为例,其包括三个核心的 project,即 tbods、tbcdm 和 tbads。图中的数字更多说明的是存储的大小,而不是表的数量,因为表的数量一定是倒三角的,但是在存储方面,30%的用于 ods,更多的则期望于的收藏在中间层,当中间层足够后,一般占到60%,而最终应用层的存储则相对小很多,因为数据都变成了一些高度聚合的指标。

网络异常,图片无法展示
|