数仓的搭建步骤及建模概念
工具/原料
hive
方法/步骤
1. ODSODS 层中的数据全部来自于业务数据库,ODS 层的表格与业务数据库中的表格一一对应,就是将业务数据库中的表格在数据仓库的底层重新建立一次,目前ODS层的数据已经基本按照商品品类区分开;2. DW:事实表和维表事实表是用来记录分析的内容的全量信息的,包含了每个事件的具体要素,以及具体发生的事情。事实表中存储数字型ID以及度量信息。维表则是对事实表中事件的要素的描述信息,就是你观察该事务的角度,是从哪个角度去观察这个内容的。事实表和维表通过ID相关联a. DW 首先针对ODS层的数据进行轻度汇总创建聚合事实表,粒度要比ODS粗,会针对度量值进行汇总,目的是避免重复计算。比如针对理财计划订单表中的总金额,id数量等提前计算出来,避免以后使用的重复计算。b. 针对这些存在度量值的表创建维度表,来从各个角度描述事实表
注意事项
实际业务来确定创建数仓的主题及维度建模
上一篇:新买的充电仓怎么配对
下一篇:幻塔纳维亚补给仓位置大全