Sponge | 一塊海綿的沙龍

Row-Oriented and Columnar Database 的差異與該如何選擇

Sponge | 一塊海綿-avatar-img
Sponge | 一塊海綿
發佈於一塊海綿的網站開發筆記
更新於 發佈於 閱讀時間約 3 分鐘
raw-image
在網頁服務中資料庫擔任了很重要的任務，用來保存客戶的資料與提供分析的數據來源，而針對不同的需求會有各類型適合資料庫來負責。

這篇文章中會針對 Row-Oriented (以列為儲存主體) 和 Columnar (以行為儲存主體) 的兩種資料庫來分析任務與資料庫間的合適搭配。

Row-Oriented 的意思

raw-image

Row-Oriented 的資料庫在儲存上會將圖上 同一 Row 的資料存為一組，因此只要知道 Id 就能快速的撈出他所在那 Row 的資料。

如圖所示，我可以透過 VendorId 找到商品的 Price 與 Cost。

而這樣的設計在統計分析上就會有一定程度的效能損耗，原因在於說我如果是想要統計所有的 Price 的加總，我雖然只需要每一個 Row 的 Price，但還是會讀取到其他的資料，導致存取上的浪費。

Columnar 的意思

raw-image

Columnar 的資料庫在儲存上會將圖上同一 Column 的資料存為一組，因此可以簡單的針對某一欄位做運算。

如圖所示，我可以直接將 Price 做加總而不需要涉及到其他欄位的資料。

而這樣的設計在一般用途上就會很不方便，當我想要透過 VendorId 找到商品的 Price 與 Cost 時，我需要將 VendorId、Price、Cost 的欄位全部撈出來，並且找到相對位置的資料，在查找上非常沒有效率。

Row-Oriented 與 Columnar 的差異

現在我們知道 Row-Oriented 與 Columnar 主要是儲存資料時的結構差異。

Row-Oriented 代表的資料庫有 MySQL、PostgreSQL、MSSQL
適用於以 Id 來找關聯資料的系統如: 電商、會員管理、庫存管理的系統

Columnar 代表的資料庫有 Google Cloud BigQuery、Snowflake
適合用於統計分析的場景，如報表系統

如何選擇

以上可以看出 Row-Oriented 與 Columnar 沒有絕對優勢，而且通常在一套系統存在大量存取時會同時使用兩種資料庫，比如電商系統在交易時採用 Row-Oriented，而在分析時將資料從 Row-Oriented 轉移到 Columnar 來做複雜的報表分析，以提升整套系統的乘載量與穩定性。

參考

Snowflake

Google Cloud BigQuery

PostgreSQL

MySQL

MSSQL

Sponge | 一塊海綿的沙龍一塊海綿的網站開發筆記
留言
avatar-img
留言分享你的想法！
avatar-img
Sponge | 一塊海綿的沙龍
6會員
10內容數
分享網站開發的前端、後端、資料庫與部屬維運技術，並記錄在工作上的心得
Sponge | 一塊海綿的沙龍的其他內容
2023/02/20
Nhost 一款 Firebase 的 GraphQL 替代方案
Hhost 是一個基於 Hasura 並且整合了 Serverless、PostgreSQL、Auth、Storage 的一體化 BaaS 服務，主要的假想敵為 Firebase 而目標是將網站系統開發盡可能的精簡與可拓展化。
Thumbnail
2023/02/20
Nhost 一款 Firebase 的 GraphQL 替代方案
Hhost 是一個基於 Hasura 並且整合了 Serverless、PostgreSQL、Auth、Storage 的一體化 BaaS 服務，主要的假想敵為 Firebase 而目標是將網站系統開發盡可能的精簡與可拓展化。
Thumbnail
2023/02/19
簡易的低門檻自託管 PaaS 選擇- CapRover、Easypanel
PaaS 是指平台即服務（platform as a service），意思是可以透過管理介面執行設定與部署而不需要處理底層的伺服器運作與維護。
Thumbnail
2023/02/19
簡易的低門檻自託管 PaaS 選擇- CapRover、Easypanel
PaaS 是指平台即服務（platform as a service），意思是可以透過管理介面執行設定與部署而不需要處理底層的伺服器運作與維護。
Thumbnail
2023/02/17
Hasura 一個開源與高性能的 GraphQL Engine Service
Hasura 是一個開源、高性能、多資料來源與嚴謹權限控管的 GraphQL Engine Service。
Thumbnail
2023/02/17
Hasura 一個開源與高性能的 GraphQL Engine Service
Hasura 是一個開源、高性能、多資料來源與嚴謹權限控管的 GraphQL Engine Service。
Thumbnail
看更多
你可能也想看
Thumbnail
avatar-avatar
Dr HI的眼科沙龍
光的選擇，就是視力的選擇— Philips 飛利浦 A5 軒博全光譜智能LED護眼檯燈      
大家好，我是一名眼科醫師，也是一位孩子的媽 身為眼科醫師的我，我知道視力發展對孩子來說有多關鍵。 每到開學季時，診間便充斥著許多憂心忡忡的家屬。近年來看診中，兒童提早近視、眼睛疲勞的案例明顯增加，除了3C使用過度，最常被忽略的，就是照明品質。 然而作為一位媽媽，孩子能在安全、舒適的環境
#momo購物網#Philips飛利浦#軒博
Thumbnail
avatar-avatar
Dr HI的眼科沙龍
光的選擇，就是視力的選擇— Philips 飛利浦 A5 軒博全光譜智能LED護眼檯燈      
大家好，我是一名眼科醫師，也是一位孩子的媽 身為眼科醫師的我，我知道視力發展對孩子來說有多關鍵。 每到開學季時，診間便充斥著許多憂心忡忡的家屬。近年來看診中，兒童提早近視、眼睛疲勞的案例明顯增加，除了3C使用過度，最常被忽略的，就是照明品質。 然而作為一位媽媽，孩子能在安全、舒適的環境
#momo購物網#Philips飛利浦#軒博
Thumbnail
avatar-avatar
逗點的沙龍
去日本自助旅行要帶多少日幣現金？最新經驗談
提供一條簡單公式、一套盤點思路，幫助你快速算出去日本自助旅遊需要準備多少日幣現金！
#日本#去日本旅遊要帶多少現金#日本自助旅行現金
Thumbnail
avatar-avatar
逗點的沙龍
去日本自助旅行要帶多少日幣現金？最新經驗談
提供一條簡單公式、一套盤點思路，幫助你快速算出去日本自助旅遊需要準備多少日幣現金！
#日本#去日本旅遊要帶多少現金#日本自助旅行現金
Thumbnail
avatar-avatar
奧莉薇走在成為後端工程師之路上
SQL - 資料表 (Table)
※ 關聯式資料庫（RDBMS）是什麼？ 關聯式資料庫（RDBMS）是一種傳統的資料庫系統，以結構化查詢語言（SQL）為基礎，將資料儲存於預定義的表格中。這些表格包括行和列，彼此之間存在明確的關聯性。 ※ 關聯式資料庫（RDBMS）有兩個重要元素： 關聯(Relational)： 關聯式資料庫
Thumbnail
avatar-avatar
奧莉薇走在成為後端工程師之路上
SQL - 資料表 (Table)
※ 關聯式資料庫（RDBMS）是什麼？ 關聯式資料庫（RDBMS）是一種傳統的資料庫系統，以結構化查詢語言（SQL）為基礎，將資料儲存於預定義的表格中。這些表格包括行和列，彼此之間存在明確的關聯性。 ※ 關聯式資料庫（RDBMS）有兩個重要元素： 關聯(Relational)： 關聯式資料庫
Thumbnail
avatar-avatar
小黑與程式的邂逅
[Database][SQL]資料庫查詢（三）
聚合函數 可以對資料的筆數、平均、最大、最小和加總的運算，提供查詢結果：如下表示： COUNT(Column)：計算筆數，「*」是統計紀錄數。 AVG(Column)：計算欄位平均值。 MAX(Column)：計算欄位最大值。 MIN(Column)：計算欄位最小值。 SUM(Colum
#Database#SQL#聚合函數
Thumbnail
avatar-avatar
小黑與程式的邂逅
[Database][SQL]資料庫查詢（三）
聚合函數 可以對資料的筆數、平均、最大、最小和加總的運算，提供查詢結果：如下表示： COUNT(Column)：計算筆數，「*」是統計紀錄數。 AVG(Column)：計算欄位平均值。 MAX(Column)：計算欄位最大值。 MIN(Column)：計算欄位最小值。 SUM(Colum
#Database#SQL#聚合函數
Thumbnail
avatar-avatar
小黑與程式的邂逅
[Database][SQL]資料庫查詢（二）
多條件查詢 AND運算子 SELECT *​ FROM your_table_name WHERE column1 LIKE '_value1%' AND column2 = number​2 OR運算子 SELECT *​ FROM your_table_name WHERE colu
#database#sql#AND
Thumbnail
avatar-avatar
小黑與程式的邂逅
[Database][SQL]資料庫查詢（二）
多條件查詢 AND運算子 SELECT *​ FROM your_table_name WHERE column1 LIKE '_value1%' AND column2 = number​2 OR運算子 SELECT *​ FROM your_table_name WHERE colu
#database#sql#AND
Thumbnail
avatar-avatar
小黑與程式的邂逅
[Database][SQL]資料庫查詢（一）
查詢範圍 指定欄位 SELECT column1, column2, column3,... FROM your_table_name 不重複欄位 SELECT DISTINCT column1 FROM your_table_name 欄位別名 SELECT column1 A
#database#sql#SELECT
Thumbnail
avatar-avatar
小黑與程式的邂逅
[Database][SQL]資料庫查詢（一）
查詢範圍 指定欄位 SELECT column1, column2, column3,... FROM your_table_name 不重複欄位 SELECT DISTINCT column1 FROM your_table_name 欄位別名 SELECT column1 A
#database#sql#SELECT
Thumbnail
avatar-avatar
Youna's Devlog
MySQL 基本語法 (一) 創建表格、資料庫
MySQL基本語法
#MySQL#SQL
Thumbnail
avatar-avatar
Youna's Devlog
MySQL 基本語法 (一) 創建表格、資料庫
MySQL基本語法
#MySQL#SQL
Thumbnail
avatar-avatar
程式輕鬆玩
[SQL] 基本操作：SELECT、UPDATE、INSERT 和 DELETE 實作教學
在資料庫管理中，SQL（Structured Query Language）是一種強大的工具，用於處理資料庫中的資料。本篇教學將介紹 SQL 中的基本操作，包括 SELECT、UPDATE、INSERT 和 DELETE，讓您能夠有效地查詢、更新、插入和刪除資料。
#程式#SQL#SELECT
Thumbnail
avatar-avatar
程式輕鬆玩
[SQL] 基本操作：SELECT、UPDATE、INSERT 和 DELETE 實作教學
在資料庫管理中，SQL（Structured Query Language）是一種強大的工具，用於處理資料庫中的資料。本篇教學將介紹 SQL 中的基本操作，包括 SELECT、UPDATE、INSERT 和 DELETE，讓您能夠有效地查詢、更新、插入和刪除資料。
#程式#SQL#SELECT
Thumbnail
avatar-avatar
貓想享
自學筆記（SQL篇）
在準備轉職期間，為了能更接近數據分析的領域，首先決定要進修的領域是程式語言，首先從門檻相對不高的SQL（Structured Query Language，結構化查詢語言）開始。在此分享目前為止學到的一些小小心得。
#程式#語言#SQL
Thumbnail
avatar-avatar
貓想享
自學筆記（SQL篇）
在準備轉職期間，為了能更接近數據分析的領域，首先決定要進修的領域是程式語言，首先從門檻相對不高的SQL（Structured Query Language，結構化查詢語言）開始。在此分享目前為止學到的一些小小心得。
#程式#語言#SQL
Thumbnail
avatar-avatar
沐木的沙龍
關聯式資料庫 (RDBMS)
我們如何把實體資料數據化？ 在真正講解關聯式資料庫，先講一下怎麼將資料存到電腦的？ 你可能在生活中使用過 excel 儲存資料，像是最近夏天很熱，大家很渴，你決定開一個試算表，讓大家參考菜單，再上去線上的 excel 填寫自己要喝什麼飲料，你一定有特定規格要大家遵守填寫，例如：飲料的糖、冰、數量
#PostgreSQL#SQL#資料庫
Thumbnail
avatar-avatar
沐木的沙龍
關聯式資料庫 (RDBMS)
我們如何把實體資料數據化？ 在真正講解關聯式資料庫，先講一下怎麼將資料存到電腦的？ 你可能在生活中使用過 excel 儲存資料，像是最近夏天很熱，大家很渴，你決定開一個試算表，讓大家參考菜單，再上去線上的 excel 填寫自己要喝什麼飲料，你一定有特定規格要大家遵守填寫，例如：飲料的糖、冰、數量
#PostgreSQL#SQL#資料庫
Thumbnail
avatar-avatar
Sponge | 一塊海綿的沙龍
Row-Oriented and Columnar Database 的差異與該如何選擇
在網頁服務中資料庫擔任了很重要的任務，用來保存客戶的資料與提供分析的數據來源，而針對不同的需求會有各類型適合資料庫來負責。 這篇文章中會針對 Row-Oriented (以列為儲存主體) 和 Columnar (以行為儲存主體) 的兩種資料庫來分析任務與資料庫間的合適搭配。
#MySQL#PostgrSQL#MSSQL
Thumbnail
avatar-avatar
Sponge | 一塊海綿的沙龍
Row-Oriented and Columnar Database 的差異與該如何選擇
在網頁服務中資料庫擔任了很重要的任務，用來保存客戶的資料與提供分析的數據來源，而針對不同的需求會有各類型適合資料庫來負責。 這篇文章中會針對 Row-Oriented (以列為儲存主體) 和 Columnar (以行為儲存主體) 的兩種資料庫來分析任務與資料庫間的合適搭配。
#MySQL#PostgrSQL#MSSQL
Thumbnail
avatar-avatar
喜特先生官方沙龍
QUERY 函式大解析（四）：進階 SELECT、GROUP BY
今天要介紹的是進階的 SELECT 功能，可以即時對 QUERY 的結果運算，迅速取得數值的平均、總和、最大值、最小值和數量，省去拉資料透視表（pivot table）的麻煩！
#教學#喜特先生#Spreadsheets
Thumbnail
avatar-avatar
喜特先生官方沙龍
QUERY 函式大解析（四）：進階 SELECT、GROUP BY
今天要介紹的是進階的 SELECT 功能，可以即時對 QUERY 的結果運算，迅速取得數值的平均、總和、最大值、最小值和數量，省去拉資料透視表（pivot table）的麻煩！
#教學#喜特先生#Spreadsheets
追蹤感興趣的內容從 Google News 追蹤更多 vocus 的最新精選內容追蹤 Google News