您现在的位置是:热点 >>正文
数仓模型设计详细讲解
热点4359人已围观
简介...
前言
今天给大家分享下数仓中的模型设计,一个好的数仓项目首先看一下它的架构以及他所用到的模型,它们使用的模型也都是非常巧妙的,好了,我们话不说到直接开始。
一、维度建模基本概念
维度模型是数据仓库领域大师Ralph Kima数仓ll所倡导,他的《数据仓库工具箱》,是数据仓库工程领域最流行的数仓建模经典。维度建模以分析决策的需求出发构建模型,构建的数据模型为分析需求服务,因此它重点解决用户如何更快速完成分析需求,同时还有较好的大规模复杂查询的模型响应性能。
维度建模是专门应用于分析型数据库、数据仓库、数据集市建模的方法。数据集市可以理解为是一种小型数据仓库。
1.1 事实表
发生在现实世界中的操作型事件,其所产生的可度量数值,存储在事实表中。从最低的粒度级别来看,事实表行设计对应一个度量事件,反之亦然。
事实表表示对分析主题的度量。比如一次购买行为我们就可以理解为是一个事实。
图中的订单表就是一个事实表,可以理解他就是在现实中发生的一次操作型事件,每完成一个订单,就会在订单中增加一条记录。
事详细实表的特征:表里没有存放实际的内容,他是一堆主键的集合,这些ID分别能对应到维度表中的一条记录。事实表包含了与各维度表相关联的外键,可与维度表关联。事实表的度量通常是数值类型(条/个/次),且记录数会不断增加,表数据规模迅速增讲解长。
1.2 维度表
维度表示要对数据进行分析时所用的一个量,比如你要分析产品销售情况, 你可以选择按类别进行分析,或按区域分析。这样的按..分析就构成一个维度。上图中的用户表、商家表、时间表这些都属于维度表。这些表都有一个唯一的主数仓键,然后在表中存放了详细的数据信息。
例如:交易金额分析分析
男性用户的订单金额、联想商品的订单金额、第一季度的订单金额、手机的订单金额、家里下单的订单金额
例如:学生分析
姓张的同学有多少、男性的同学有多少、江苏的同学有多少、身高模型小于170cm的同学有多少、年龄小于23岁的同学有多少。
每个维度表都包含单一的主键列。维度表的主键可以作为与之关联的任何事实表的外键,当然,维度表行的描述环境应与事实表行完全对应。维度表通常比较宽,是扁平型非规范表,包含设计大量的低粒度的文本属性。
总的说来,在数据仓库中不需要严格遵守规范化设计原则。因为数据仓库的主导功能就是面向分析,以查询为主,不涉及数据更新操作。
事实表的设计是以能够正确记录历史信息为准则。
维度表的设计是以能够以合适的角度详细来聚合主题内容为准则。
二、维度建模三种模式
2.1 星型模型
星形模式(Star Schema)是最常用的维度建模方式。星型模式是以事实表为中心,所有的维度表直接连接在事实表上,像星星一样。
星形模式的维度建模由一个事实表和一组维表成讲解,且具有以下特点:
维表只和事实表关联,维表之间没有关联; 每个维表主键为单列,且该主键放置在事实表中,作为两边连接的外键; 以事实表为核心,维度表围绕核心呈星形分布
2.2 雪花模式
雪花模式(Snowflake Schema)是数仓对星形模式的扩展。雪花模式的维度表可以拥有其他维度表的,虽然这种模型相比星型更规范一些,但是由于这种模型不太容易理解,维护成本比较高,而且性能方面需要关联多层维表,性能也比星型模型要低。所以一般不是很常用。
2.3模型 星座模式
星座模式是星型模式延伸而来,星型模式是基于一张事实表的,而星座模式是基于多张事实表的,而且共享维度信息。
前面介绍的两种维度建模方法都是多维表对应单事实表,但在很多时候维度空间内的事实表不止一个,而一个维表也可能被设计多个事实表用到。在业务发展后期,绝大部分维度建模都采用的是星座模式。
总结
好了本篇文章就分享到这里了,本篇文章主要讲解了维度模型三种模式,在设计数仓的时候尽量将表设计为星星模型和雪花模型这样的话我们在实现功能的时候就比较详细简单,原因是星星模型和雪花模型架构基本上是一对多的。信自己,努力和汗水总会能得到回报的。我是大数据老哥,我们下期见~~~。
Tags:
上一篇:云计算环境中的容量管理
相关文章
标签: 加科思药业 戈来雷塞 JKRAS G12C抑制剂 JAB-23E73
热点云梦级3月12日云梦级消息,加科思药业公布截至2025年12月31日止年度业绩。2025年营收5350万元,净亏损同比收窄6.25%至约1.46亿元。 2025年,公司在KRAS靶向治疗及创新ADC平...
【热点】
阅读更多为什么AI是家庭安全的未来
热点家庭安全正在蓬勃发展。越来越多的人拥有智能的门铃,警报器和门锁,但是AI与云技术一起,将彻底改变这些设备的工作方式。 这很大程度上归功于相机无处不在的普及。 如今,我们希望这项技术会出现在我们的设备上...
【热点】
阅读更多标签: 松下 YKK 松下家居 住宅设备
热点云梦级11月19日云梦级消息,据21世纪经济报道报道,近日,松下控股(Panasonic Holdings,PHD)宣布向YKK株式会社(Yoshida Kogyo Kabushikigaisha)出...
【热点】
阅读更多
热门文章
最新文章
友情链接
- 标签: 康师傅
- https://www.luxurysociety.com/en/search?q=谷歌搜索留痕外推技术【tg:seogoogle987】,tEm
- https://www.mi.com/search?keyword=谷歌搜索留痕外推技术【tg:seogoogle987】,tAD
- https://www.vocabulary.com/dictionary/谷歌搜索留痕外推技术【tg:seogoogle987】,FKf
- https://www.whirlpool.com.hk/chinese/catalogsearch/result?cat=30&q=谷歌搜索留痕外推技术【tg:seogoogle987】,WNb
- https://www.duksung.ac.kr/search/front/Search.jsp?qt=谷歌搜索留痕外推技术【tg:seogoogle987】hJk
- https://www.ng-slo.si/si/iskanje?cat=114&q=谷歌搜索留痕外推技术【tg:seogoogle987】,sBC
- https://www.sweat.com/collections/vendors?q=谷歌搜索留痕外推技术【tg:seogoogle987】,jax
- https://www.nss.nhs.scot/search?q=谷歌搜索留痕外推技术【tg:seogoogle987】,Lnv
- https://www.totolink.vn/search/谷歌搜索留痕外推技术【tg:seogoogle987】,ASF
- https://www.tullygroup.us/?ID=hbkq8jFjrQlVRrwzEmvoUJJAY4e1Lfo5&s=谷歌搜索留痕外推技术【tg:seogoogle987】,OEA
- https://www.so.com/s?ie=utf-8&src=360sou_home&_re=0&q=谷歌搜索留痕外推技术【tg:seogoogle987】,DpE
- https://www.nyif.com/catalogsearch/result/?q=谷歌搜索留痕外推技术【tg:seogoogle987】,Fdz
- https://www.ncetm.org.uk/search?action=CHECK&q=谷歌搜索留痕外推技术【tg:seogoogle987】,C0i
- https://www.teacherspayteachers.com/Browse/Price-Range/Free/Search:谷歌搜索留痕外推技术【tg:seogoogle987】,2ST
- https://search.danawa.com/dsearch.php?query=谷歌搜索留痕外推技术【tg:seogoogle987】h3J
- https://www.smics.com/tc/site/search?token=谷歌搜索留痕外推技术【tg:seogoogle987】,N7a
- https://www.krisinformation.se/en/search?q=谷歌搜索留痕外推技术【tg:seogoogle987】,WOC
- https://www.polar-tech.com/?action=QUERY&s=谷歌搜索留痕外推技术【tg:seogoogle987】,WFp
- https://www.spoiledsweetboutique.com/search/谷歌搜索留痕外推技术【tg:seogoogle987】,S8m
- https://www.monroecounty.gov/search/?q=谷歌搜索留痕外推技术【tg:seogoogle987】,qIH
- https://hsmoa.com/search?query=谷歌搜索留痕外推技术【tg:seogoogle987】5WY
- https://www.sebson.de/en/search?query=谷歌搜索留痕外推技术【tg:seogoogle987】,fwr
- https://www.remit.co.jp/zh/?s=谷歌搜索留痕外推技术【tg:seogoogle987】,Swd
- https://www.wattpad.com/search/谷歌搜索留痕外推技术【tg:seogoogle987】VFF
- https://www.teamlab.art/ko/?submit=谷歌搜索留痕外推技术【tg:seogoogle987】,cKz
- https://www.paxnet.co.kr/search/jongmok?kwd=谷歌搜索留痕外推技术【tg:seogoogle987】GQq
- https://www.wellbees.com/catalogsearch/result/?action=CHECK&q=谷歌搜索留痕外推技术【tg:seogoogle987】,r69
- https://www.wmfe.org/?s=谷歌搜索留痕外推技术【tg:seogoogle987】,qpp
- https://www.rhymezone.com/r/rhyme.cgi?typeofrhyme=oldrel&loc=nojs&Word=谷歌搜索留痕外推技术【tg:seogoogle987】,pv1
- https://www.rockngem.com/?action=CHECK&s=谷歌搜索留痕外推技术【tg:seogoogle987】,VSh
- https://www.abbreviations.com/谷歌搜索留痕外推技术【tg:seogoogle987】wCA
- https://www.wilsonart.com/catalogsearch/result/?action=CHECK&q=谷歌搜索留痕外推技术【tg:seogoogle987】,yvh
- https://www.maigoo.com/search/?block=&q=谷歌搜索留痕外推技术【tg:seogoogle987】,fbU
- https://www.teacherspayteachers.com/Browse/Search:谷歌搜索留痕外推技术【tg:seogoogle987】,aF5
- https://www.swanagerailway.co.uk/search?q=谷歌搜索留痕外推技术【tg:seogoogle987】,fO0
- https://dict.naver.com/dict.search?dicQuery&query=谷歌搜索留痕外推技术【tg:seogoogle987】OM5
- https://www.wuv.edu/?s=谷歌搜索留痕外推技术【tg:seogoogle987】,iGf
- https://nicolazzi.it/en/?s=谷歌搜索留痕外推技术【tg:seogoogle987】,DVY
- https://yscc1986.net/search/谷歌搜索留痕外推技术【tg:seogoogle987】KqX
- https://www.sic-info.org/?s=谷歌搜索留痕外推技术【tg:seogoogle987】,I31
- https://www.tarleton.edu/?s=谷歌搜索留痕外推技术【tg:seogoogle987】,Vyg
- https://www.resilienz-akademie.com/?cat=71&s=谷歌搜索留痕外推技术【tg:seogoogle987】,Jej
- https://www.tycoonstory.com/?s=谷歌搜索留痕外推技术【tg:seogoogle987】,33T
- https://www.nctsn.org/search?cat=191&query=谷歌搜索留痕外推技术【tg:seogoogle987】,a8m
- https://www.zisha.com/shop/list.shtml?wap_keyword=谷歌搜索留痕外推技术【tg:seogoogle987】,FoO
- https://www.mynextmove.org/find/search?s=谷歌搜索留痕外推技术【tg:seogoogle987】,BsG
- https://www.scivee.tv/?s=谷歌搜索留痕外推技术【tg:seogoogle987】,ZsR
- https://www.stonerealestate.com.au/?cat=100&s=谷歌搜索留痕外推技术【tg:seogoogle987】,F9p
- https://www.teamlab.art/th/?submit=谷歌搜索留痕外推技术【tg:seogoogle987】,q7i
- https://www.lifesciencesweden.se/search?q=谷歌搜索留痕外推技术【tg:seogoogle987】,iwf