首页
/
每日頭條
/
職場
/
數據倉庫的基本類型
數據倉庫的基本類型
更新时间:2026-10-15 21:38:30

今天這篇文章,給大家講述一下數據倉庫的基本概念,作為我們一起探讨的内容。希望大家留言、評論,我們一起學習。

一 數據倉庫的概念

數據倉庫,英文名稱為Data Warehouse,可簡寫為DW或DWH。數據倉庫,是為企業所有級别的決策制定過程,提供所有類型數據支持的戰略集合。它出于分析性報告和決策支持目的而創建。 為需要業務智能的企業,提供指導業務流程改進、監視時間、成本、質量以及控制。現在常見的數據倉庫是企業級數據倉庫,即EDW。

數據倉庫的基本類型(淺談數據倉庫的基本概念)1

二 數據倉庫出現的背景

1 需求的變化,主要是業務系統系統建設完善,統計分析類需求增加,還有就是大量的信息碎片化和孤島化,導緻數據集成和數據質量問題不斷增加

2 技術發展,技術發展到一定程度,必然推動系統更新換代。關系型數據庫技術逐漸成熟穩定,報表和複雜查詢處理起來異常困難,數據标準的問題。

以上兩個原因是數據倉庫出現的大緻背景。

數據倉庫的基本類型(淺談數據倉庫的基本概念)2

三 數據倉庫與OLTP

1 數據倉庫,數據量大,保存曆史,面向主題,主要用來統計分析

2 OLTP,生産系統,面向應用;事物驅動;實時性高;數據檢索相對少;隻存當前數據

比如以銀行卡為例,我們用銀行卡取錢,首先到ATM進行交易,然後ATM查詢核心系統,核心系統完成交易,你拿到錢。這個就是面向應用,事物驅動,并且是實時的,數據查詢就隻查你的賬戶數據(餘額信息),并且還是你時點的餘額信息。

數據倉庫的基本類型(淺談數據倉庫的基本概念)3

四 數據倉庫與OLTP的區别

數據倉庫的基本類型(淺談數據倉庫的基本概念)4

挑一個來說一下,更新和不更新

操作型數據庫對于數據是更新的,還是前面說的取錢,我們取了錢,那麼我的餘額是要變更的。但是對于分析性數據庫來說呢,是不變的,原有的一筆數據依舊保留,會新增一條餘額變動的數據記錄,就是保留曆史數據。能理解吧。

五 數據倉庫的特征

這個大家就看下圖吧,不細說了。面向主題;集成;記錄時間變化;不更新

數據倉庫的基本類型(淺談數據倉庫的基本概念)5

六 數據倉庫理論的形成

數據倉庫的基本類型(淺談數據倉庫的基本概念)6

七 什麼是ODS

ODS,大家在工作中,如果有做數據倉庫的應該比較清楚,大家一說ODS,馬上就能想到數據倉庫,工作中好多同事都覺得是一回事。其實不然,ODS隻是數據倉庫的一部分,現在的數據倉庫大部分都是基于ODS和OLTP集合在一起了,最常見的就是數據倉庫中既有曆史數據的保留,還有面向應用系統統計分析的各個集市。

數據倉庫的基本類型(淺談數據倉庫的基本概念)7

八 ODS應用的形成

數據倉庫的基本類型(淺談數據倉庫的基本概念)8

九 ODS與 EDW

簡單理解為ODS為O層數據,基本能上和源系統一緻,可能會有寫标準化的字段。EDW是基于ODS數據整合,就是ETL的過程。常見的可以分為公共層,彙總層。

數據倉庫的基本類型(淺談數據倉庫的基本概念)9

十 數據模型

1 邏輯模型:不考慮物理數據庫,獨立的。比較關注業務邏輯和業務規則。

2 物理模型:簡單理解就是将邏輯模型,轉化成數據庫語言,即DDL。

數據倉庫的基本類型(淺談數據倉庫的基本概念)10

十一 雪花模型和星型模型

數據倉庫的基本類型(淺談數據倉庫的基本概念)11

這塊理解一下就可以了,實際開發中是不會嚴格按照星型或者雪花來設計,實際工作中是按照業務來進行模型設計,根據業務規則,設計出最合适的數據模型。

我們大部分項目中,用到的是雪花這種模型,大寬表,數據冗餘,更有利于業務查詢,性能比較高。

優缺點:

雪花模型可以精确表示層次化的數據,但還是應該避免使用雪花模式,因為對商業用戶來說,理解雪花模式并在其中查詢是非常困難的,雪花模式還會影響查詢性能

從查詢性能角度來看,在OLTP-DW環節,由于雪花型要做多個表聯接,性能會低于星型架構;但從DW-OLAP環節,由于雪花型架構更有利于度量值得聚合,因此性能要高于星型架構。

從模型複雜度來看,星型架構更簡單。

從層次概念來看,雪花型架構更加貼近OLTP系統的結構,比較符合業務邏輯,層次比較清晰。

從存儲空間角度來看,雪花型架構具有關系數據模型的所有優點,不會産生冗餘數據,而相比之下星型架構會産生數據冗餘。

應用場景:

星型模型的設計方式主要帶來的好處是能夠提升查詢效率,因為生成的事實表已經經過預處理,主要的數據都在事實表裡面,所以隻要掃描事實表就能夠進行大量的查詢,而不必進行大量的join,其次維表數據一般比較少,在join可直接放入内存進行join以提升效率,除此之外,星型模型的事實表可讀性比較好,不用關聯多個表就能獲取大部分核心信息,設計維護相對比較簡答。

雪花模型的設計方式是比較符合數據庫範式的理念,設計方式比較正規,數據冗餘少,但在查詢的時候可能需要join多張表從而導緻查詢效率下降,此外規範化操作在後期維護比較複雜。

好了,這篇文章就給大家寫到這裡了,希望大家留言、評論。我們一起探讨,學習。大家喜歡的,可以點個關注 ,我會不定期更新文章,将自己的經驗分享出來。

,
Comments
Welcome to tft每日頭條 comments! Please keep conversations courteous and on-topic. To fosterproductive and respectful conversations, you may see comments from our Community Managers.
Sign up to post
Sort by
Show More Comments
推荐阅读
社區工作者暖心的話
社區工作者暖心的話
社區工作者暖心的話?2021年1月,年近55歲的張傳珍的工作崗位再次調動,擔任瑞金二路街道思南居民區黨總支書記自2006年進入瑞金二路街道工作,16年裡她已先後服務了7個居民區,從普通社工到居民區黨總支書記,無論在哪個崗位,她始終保持嚴謹的...
2026-10-15
工作遇到困難時激勵自己的名言
工作遇到困難時激勵自己的名言
工作遇到困難時激勵自己的名言?困難是一個嚴厲的導師——貝克困難與折磨對于人來說,是一把打向坯料的錘,打掉的應是脆弱的鐵屑,鍛成的将是鋒利的鋼刀——契诃夫,下面我們就來說一說關于工作遇到困難時激勵自己的名言?我們一起去了解并探讨一下這個問題吧...
2026-10-15
小學一年級班主任工作總結範文
小學一年級班主任工作總結範文
小學一年級班主任工作總結範文?思想教育工作,對于一年級的小學生來說,雖然接受了半年的各科教育,但在組織紀律方面還需要進一步的加強因此,本人在這學期對他們仍然進行了紀律上的嚴格要求,班主任老師組織學生又重新學習了校風、校紀、校規、班風、學風,...
2026-10-15
一線城市工資怎麼漲
一線城市工資怎麼漲
從老家或者小城市跳到北上廣深杭蘇,漲薪是應該的,城市工資差在我們工資區别中毫無疑問占據第一影響要素。大家再複習下這個影響工資的要素公式:城市>學曆>年限>企業>談工資>行業>職務>努力>專業對口>興趣愛好>個人性格>雞血>雞湯>個人能力>我...
2026-10-15
面試三分鐘自我介紹怎麼說
面試三分鐘自我介紹怎麼說
基本上所有的面試都是從自我介紹開始的,一個自信,大方,切中要點的自我介紹是成功面試的關鍵!首先,自我介紹該說多長?我見到過有候選人隻說三句話的:我叫孫榮,我是沈陽人,我想應聘市場部經理職位。拜托,這又不是快樂男生選秀的自我介紹,多說幾句吧!...
2026-10-15
Copyright 2023-2026 - www.tftnews.com All Rights Reserved