久久精品人人爽,华人av在线,亚洲性视频网站,欧美专区一二三

如何理解數據庫的行式存儲和列式存儲

144次閱讀
沒有評論

共計 1855 個字符,預計需要花費 5 分鐘才能閱讀完成。

如何理解數據庫的行式存儲和列式存儲,很多新手對此不是很清楚,為了幫助大家解決這個難題,下面丸趣 TV 小編將為大家詳細講解,有這方面需求的人可以來學習下,希望你能有所收獲。

傳統的關系型數據庫,如 Oracle、DB2、MySQL、SQL SERVER 等采用行式存儲法(Row-based),在基于行式存儲的數據庫中,數據是按照行數據為基礎邏輯存儲單元進行存儲的,一行中的數據在存儲介質中以連續存儲形式存在。

我們知道,當今的數據處理大致可分為兩大類,聯機事務處理 OLTP(on-line transaction processing)和聯機分析處理 OLAP(On-Line Analytical Processing)。OLTP 是傳統關系型數據庫的主要應用,用來執行一些基本的、日常的事務處理,比如數據庫記錄的增、刪、改、查等等;而 OLAP 則是分布式數據庫的主要應用,它對實時性要求不高,但處理的數據量大,通常應用于復雜的動態報表系統上。

OLTP 與 OLAP 的主要區別

OLTP 與 OLAP,在數據庫的應用類別方面,為何會出現顯著差別呢? 其實,這是因數據庫存儲模式不同而造成的。

行式存儲和列式存儲

傳統的關系型數據庫,如 Oracle、DB2、MySQL、SQL SERVER 等采用行式存儲法(Row-based),在基于行式存儲的數據庫中,數據是按照行數據為基礎邏輯存儲單元進行存儲的,一行中的數據在存儲介質中以連續存儲形式存在。

列式存儲 (Column-based) 是相對于行式存儲來說的,新興的 Hbase、HP Vertica、EMC Greenplum 等分布式數據庫均采用列式存儲。在基于列式存儲的數據庫中,數據是按照列為基礎邏輯存儲單元進行存儲的,一列中的數據在存儲介質中以連續存儲形式存在。

行式存儲的適用場景包括:

1、適合隨機的增刪改查操作;

2、需要在行中選取所有屬性的查詢操作;

3、需要頻繁插入或更新的操作,其操作與索引和行的大小更為相關。

實操中我們會發現,行式數據庫在讀取數據的時候會存在一個固有的“缺陷”,比如,所選擇查詢的目標即使只涉及少數幾項屬性,但由于這些目標數據埋藏在各行數據單元中,而行單元往往又特別大,應用程序必須讀取每一條完整的行記錄,從而使得讀取效率大大降低。對此,行式數據庫給出的優化方案是加“索引”,在 OLTP 類型的應用中,通過索引機制或給表分區等手段,可以簡化查詢操作步驟,并提升查詢效率。

但針對海量數據背景的 OLAP 應用(例如分布式數據庫、數據倉庫等等),行式存儲的數據庫就有些“力不從心”了。行式數據庫建立索引和物化視圖,需要花費大量時間和資源,因此還是得不償失,無法從根本上解決查詢性能和維護成本等問題也不適用于數據倉庫等應用場景,所以后來出現了基于列式存儲的數據庫。

對于數據倉庫和分布式數據庫來說,大部分情況下它會從各個數據源匯總數據,然后進行分析和反饋,其操作大多是圍繞同一列屬性的數據進行的,而當查詢某屬性的數據記錄時,列式數據庫只需返回與列屬性相關的值,在大數據量查詢場景中,列式數據庫可在內存中高效組裝各列的值,最終形成關系記錄集,因此可以顯著減少 IO 消耗,并降低查詢響應時間,非常適合數據倉庫和分布式的應用。

列式存儲引擎的適用場景包括:

1、查詢過程中,可針對各列的運算并發執行(SMP),*** 在內存中聚合完整記錄集,*** 可能降低查詢響應時間;

2、可在數據列中高效查找數據,無需維護索引(任何列都能作為索引),查詢過程中能夠盡量減少無關 IO,避免全表掃描;

3、因為各列獨立存儲,且數據類型已知,可以針對該列的數據類型、數據量大小等因素動態選擇壓縮算法,以提高物理存儲利用率; 如果某一行的某一列沒有數據,那在列存儲時,就可以不存儲該列的值,這將比行式存儲更節省空間。

當然,跟行數據庫一樣,列式存儲也有不太適用的場景。

主要包括:

鴻蒙官方戰略合作共建——HarmonyOS 技術社區

數據需要頻繁更新的交易場景

表中列屬性較少的小量數據庫場景

不適合做含有刪除和更新的實時操作

隨著列式數據庫的發展,傳統的行式數據庫加入了列式存儲的支持,形成具有兩種存儲方式的數據庫系統。例如,隨著 Oracle 12c 推出了 in memory 組件,使得 Oracle 數據庫具有了雙模式數據存放方式,從而能夠實現對混合類型應用的支持,當然列式數據庫也有對行式存儲的支持比如 HP Vertica。

看完上述內容是否對您有幫助呢?如果還想對相關知識有進一步的了解或閱讀更多相關文章,請關注丸趣 TV 行業資訊頻道,感謝您對丸趣 TV 的支持。

正文完
 
丸趣
版權聲明:本站原創文章,由 丸趣 2023-07-19發表,共計1855字。
轉載說明:除特殊說明外本站除技術相關以外文章皆由網絡搜集發布,轉載請注明出處。
評論(沒有評論)
主站蜘蛛池模板: 乐至县| 仙游县| 兰州市| 长汀县| 九龙县| 遂溪县| 皋兰县| 昭平县| 莲花县| 德江县| 调兵山市| 内黄县| 巴楚县| 韶关市| 灵丘县| 闽清县| 中牟县| 高唐县| 涿州市| 乌兰浩特市| 宜宾市| 岑巩县| 康定县| 泉州市| 巧家县| 福泉市| 来宾市| 本溪市| 锡林浩特市| 彩票| 株洲县| 镇赉县| 东乡| 新兴县| 永新县| 开原市| 南华县| 清水河县| 泸州市| 吉木乃县| 桂平市|