数字仓储建模理论与规范 (II) | 学习笔记 - IV.数据分层架构设计
最编程
2024-03-21 16:59:39
...
关于数据分层,目前占大多数的比较传统的经典的三层模型架构设计以及台内外的分层设计方式都是按照从 ODS 贴原,中间系列的公共层进行一些设计,CDM 层在梳理业务完成后,ADS 层会进行数据整合,针对每一部分业务过程进行分域,并进行中间层明细的事实设计。事实包括两部分,即事实的明细和汇总。在 CDM 之上,会做做很多面向产品、面向业务场景等的应用,即进行偏向业务的应用设计应用层的模型。
以淘宝为例,其包括三个核心的 project,即 tbods、tbcdm 和 tbads。图中的数字更多说明的是存储的大小,而不是表的数量,因为表的数量一定是倒三角的,但是在存储方面,30%的用于 ods,更多的则期望于的收藏在中间层,当中间层足够后,一般占到60%,而最终应用层的存储则相对小很多,因为数据都变成了一些高度聚合的指标。
网络异常,图片无法展示
|
推荐阅读
-
利用 Tax4Fun2 对 16S 微生物组数据进行功能预测
-
数据库约束 | 表设计 | 聚合查询 | 联合查询 - MySQL 精细化库
-
杨亿与万安寺拯救计划,以及灭绝之死
-
人工智能综述专栏 | 孙士良:多视图机器学习概述
-
杨逍与幻阴指
-
bootstrap 表格实现了 x-editable 行单元格编辑,并解决了数据空和支持多种样式的问题。
-
技术峰会|58同城孙启铭受邀参加全球机器学习技术大会(2023)--个人简介:
-
关于高效数据收集工具的建议
-
[学习笔记] - mooc - 教学研究的数据处理与工具应用(问卷调查+问卷之星的使用+SPSS的下载、安装、使用与入门) - 华南师范大学
-
Orange3 数据可视化(树形浏览器 - 决策树)