日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

大数据基础篇(一):联机分析处理(OLAP) 与 联机事务处理(OLTP)

發布時間:2023/12/20 编程问答 31 豆豆
生活随笔 收集整理的這篇文章主要介紹了 大数据基础篇(一):联机分析处理(OLAP) 与 联机事务处理(OLTP) 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

聯機事務處理(OLTP)

OLTP也稱實時系統(Real Time System),支持事務快速響應和大并發,這類系統典型的有ATM機(Automated Teller Machine)系統、自動售票系統等,但有些銀行轉賬并不是實時到賬的。OLTP反映企業當前的運行狀態,完成企業管理所包含的日常任務的數據庫應用,一般沒有復雜的查詢和分析處理。

?

聯機分析處理(OLAP)

OLAP也稱決策支持系統(Decision Support System,DSS),是數據倉庫系統的主要應用形式,使分析人員、管理人員或執行人員能夠從多種角度對從原始數據中轉化出來的、能夠真正為用戶所理解的、并真實反映企業維特性的信息進行快速、一致、交互地存取,從而獲得對數據的更深入了解的一類軟件技術。

基于數據倉庫的決策支持系統通常由數據倉庫、聯機分析處理和數據挖掘三個部分組成,其中數據倉庫是系統的核心。

OLAP的目標是滿足決策支持或多維環境特定的查詢和報表需求,它的技術核心概念是維(觀察數據的特定角度,如時間維),因此OLAP也可以說是多維數據分析工具的集合。

OLAP系統按照數據存儲格式可以分為Relational OLAP(ROLAP)、Multidimensional OLAP(MOLAP)和Hybrid OLAP(HOLAP)三種類型。ROLAP基本數據和聚合數據均存放在RDBMS之中;MOLAP基本數據和聚合數據均存放于多維數據庫中;HOLAP基本數據存放于RDBMS之中,聚合數據存放于多維數據庫中。

E.F.Codd提出12條準則來描述OLAP系統:

準則1 OLAP模型必須提供多維概念視圖   準則2 透明性準則    準則3 存取能力推測    準則4 穩定的報表能力    準則5 客戶/服務器體系結構    準則6 維的等同性準則    準則7 動態的稀疏矩陣處理準則    準則8 多用戶支持能力準則    準則9 非受限的跨維操作    準則10 直觀的數據操縱    準則11 靈活的報表生成    準則12 不受限的維與聚集層次


 ?

多維數據庫(Multi Dimensional Database,MDD)

數據存放在一個n維數組中,而非關系數據庫以記錄形式存放,屬后關系型數據庫,主要特征是將多維處理和面向對象技術結合到關系數據庫上。它存在大量稀疏矩陣,可以通過多維視圖來觀察數據。多維存儲基本形式如:(2000年1月,上海,筆記本電腦,#0000)。

?

數據集市(Datamarts)

為了特定的應用目的或應用范圍,而從數據倉庫中獨立出來的一部分數據,也可稱為部門數據或主題數據(Subjectarea)。在數據倉庫的實施過程中往往可以從一個部門的數據集市著手,以后再用幾個數據集市組成一個完整的數據倉庫。需要注意的就是在實施不同的數據集市時,同一含義的字段定義一定要相容,這樣在以后實施數據倉庫時才不會造成大麻煩。

?

數據倉庫(Data Warehouse,DW)

是一個面向主題的(Subject Oriented)、集成的(Integrated)、相對穩定的(Non-Volatile)、反映歷史變化(Time Variant)的海量數據集合(包括大量冗余數據),用以支持經營管理中的決策制定過程,核心是海量數據存放和海量數據檢索。相對于操縱型數據庫來說其突出的特點是對海量數據的支持和快速的檢索技術。為了實現決策支持型數據處理與事務型數據處理的分離,它按照一定的周期將事務型數據轉換導入決策支持數據庫中。數據倉庫系統是一個信息提供平臺,他從業務處理系統獲得數據,主要以星型模型和雪花模型進行數據組織,為用戶提供各種手段從中獲取信息和知識。數據倉庫按照數據的覆蓋范圍可以分為企業級數據倉庫和部門級數據倉庫(通常稱為數據集市)。從功能結構劃分,數據倉庫系統至少應該包含數據獲取(Data Acquisition)、數據存儲(Data Storage)、數據訪問(Data?Access)三個關鍵部分。

?

ETL(Extraction-Transformation-Loading)

負責將分布的、異構數據源中的數據如關系數據、平面數據(去除了所有特定應用格式,可以遷移到其他應用上進行處理的一類數據,比如逗號分隔數據)文件等抽取到臨時中間層后進行清洗、轉換、集成,最后加載到數據倉庫或數據集市中,成為聯機分析處理、數據挖掘的基礎,是BI(Business Intelligence)/DW的核心和靈魂,是數據倉庫中的非常重要的一環。數據倉庫是一個獨立的數據環境,需要通過抽取過程將數據從聯機事務處理環境、外部數據源或者脫機的數據存儲介質導入到數據倉庫中;在技術上,ETL主要涉及到關聯、轉換、增量、調度和監控等幾個方面;數據倉庫系統中數據不要求與聯機事務處理系統中數據實時同步,所以ETL可以定時進行。在數據倉庫建設中最難部分是用戶需求分析和模型設計,而ETL規則設計和實施則是工作量最大的,約占整個項目的60%~80%。

?

轉載于:https://www.cnblogs.com/XiongMaoMengNan/p/7803562.html

總結

以上是生活随笔為你收集整理的大数据基础篇(一):联机分析处理(OLAP) 与 联机事务处理(OLTP)的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。