筆記[工作]-BigQuery影片觀看:BigQuery簡介

更新 發佈閱讀 2 分鐘

因為工作上會接觸Google Cloud的BigQuery,所以上網找了幾個影片來快速了解一下,將影片中的幾個點列出來,不過建議還是把整個影片看完喔,因為影片不長且包含更多資訊。:)


[BigQuery 教學] 046 雲端界陳浩南 - BigQuery 到底有多快?| 簡報免費下載—東東GCP教學

BigQuery是Google Cloud的雲端資料倉儲和分析的工具:

  1. 跟傳統關聯式資料庫以列儲存的方式不同,是以欄位的方式分開儲存,且可以進一步壓縮起來,讓資料量更小,處理速度更快。
  2. 分散式處理。當分析的指令產生時,前面原本主要的機器會去啟動後面所有其他的機器,每台機器都被分配一點資料處理的工作,全部處理完後再統整回來,回傳整個分析的結果,所以可以大幅縮短執行時間。
  3. 無伺服器,不需要管理機器。儲存資料無上限,以儲存量和查詢量計價,不需要在使用前先購買或租用機器。
  4. 有免費沙箱可以使用。


圖解 GCP・使用 Big Query 5大誘因 & 完整架構介紹 |入門|介紹|程式|科技|教學|介紹|雲端|Google—矽谷叔叔 Uncle Sam

  1. Serverless,Google會在後面把伺服器管好,不必擔心某個伺服器壞掉導致服務被中斷,達到high ability。
  2. Distributed,一個query會交由多台虛擬機來處理,使效能很快。
  3. Columnar Storage,以欄位作為儲存的單位,因為分析時通常會聚焦在某幾個欄位上面,所以適合用在商業智能分析上面。
  4. BigQuery的架構為:project->dataset->table。另外,BigQuery有public project,裡面有公開的資料可使用。


留言
avatar-img
留言分享你的想法!
avatar-img
柴郡貓姍蒂的沙龍
49會員
39內容數
2025/06/29
OLTP: 線上交易處理(Online transaction processing)。OLTP是一種資料處理系統,主要設計用於處理大量即時、頻繁、且小規模的資料交易。這類系統是企業日常營運的基礎,例如銀行交易、超商結帳、訂單處理等。 特性:高頻率操作,處理大量且頻繁的交易操作(新增、修改、刪除
2025/06/29
OLTP: 線上交易處理(Online transaction processing)。OLTP是一種資料處理系統,主要設計用於處理大量即時、頻繁、且小規模的資料交易。這類系統是企業日常營運的基礎,例如銀行交易、超商結帳、訂單處理等。 特性:高頻率操作,處理大量且頻繁的交易操作(新增、修改、刪除
2025/01/04
前言 最近在研究時間序列的預測,除了上課,也有在Medium上看文章,學到一些知識,除了自己做筆記記錄,也分享給大家。本篇筆記為翻譯統整:Neural Network (MLP) for Time Series Forecasting in Practice—Daniel J. TOTH,這篇Me
2025/01/04
前言 最近在研究時間序列的預測,除了上課,也有在Medium上看文章,學到一些知識,除了自己做筆記記錄,也分享給大家。本篇筆記為翻譯統整:Neural Network (MLP) for Time Series Forecasting in Practice—Daniel J. TOTH,這篇Me
2024/10/09
前言 跟上一篇文章一樣,都是看到陌生的演算法後,去搜尋資料記錄成文章。 正文 在強化式學習中,策略(Policy)指的是代理人根據目前的狀態決定下一個動作的方針,具體來說就是在某個狀態下採取某個動作的機率。Policy Gradient的目的是找到一個最優策略,使得整個任務的回報值最大化。
2024/10/09
前言 跟上一篇文章一樣,都是看到陌生的演算法後,去搜尋資料記錄成文章。 正文 在強化式學習中,策略(Policy)指的是代理人根據目前的狀態決定下一個動作的方針,具體來說就是在某個狀態下採取某個動作的機率。Policy Gradient的目的是找到一個最優策略,使得整個任務的回報值最大化。
看更多
你可能也想看
Thumbnail
還在煩惱平凡日常該如何增添一點小驚喜嗎?全家便利商店這次聯手超萌的馬來貘,推出黑白配色的馬來貘雪糕,不僅外觀吸睛,層次豐富的雙層口味更是讓人一口接一口!本文將帶你探索馬來貘雪糕的多種創意吃法,從簡單的豆漿燕麥碗、藍莓果昔,到大人系的奇亞籽布丁下午茶,讓可愛的馬來貘陪你度過每一餐,增添生活中的小確幸!
Thumbnail
還在煩惱平凡日常該如何增添一點小驚喜嗎?全家便利商店這次聯手超萌的馬來貘,推出黑白配色的馬來貘雪糕,不僅外觀吸睛,層次豐富的雙層口味更是讓人一口接一口!本文將帶你探索馬來貘雪糕的多種創意吃法,從簡單的豆漿燕麥碗、藍莓果昔,到大人系的奇亞籽布丁下午茶,讓可愛的馬來貘陪你度過每一餐,增添生活中的小確幸!
Thumbnail
Professional Google Workspace Administrator 考試/資源/心得整理 | Google Cloud
Thumbnail
Professional Google Workspace Administrator 考試/資源/心得整理 | Google Cloud
Thumbnail
Professional Cloud Database Engineer 考試/資源/心得整理 |Google Cloud
Thumbnail
Professional Cloud Database Engineer 考試/資源/心得整理 |Google Cloud
Thumbnail
Google Cloud Certified Professional Cloud Developer 考試/資源/心得
Thumbnail
Google Cloud Certified Professional Cloud Developer 考試/資源/心得
Thumbnail
Google Cloud Professional Network Engineer 出題方向/學習資源/心得整理
Thumbnail
Google Cloud Professional Network Engineer 出題方向/學習資源/心得整理
Thumbnail
這一篇要測試一下Video Linear CFG Guidance這個節點,在網路上很多的教學影片跟網友分享的工作流中會看到這個節點,據說這個節點不只可以用在生成影片的工作流中,也可以使用在一般的生成圖片工作流中。
Thumbnail
這一篇要測試一下Video Linear CFG Guidance這個節點,在網路上很多的教學影片跟網友分享的工作流中會看到這個節點,據說這個節點不只可以用在生成影片的工作流中,也可以使用在一般的生成圖片工作流中。
Thumbnail
這邊統整了所有過去發表過關於 QUERY 函式的教學分享,希望可以方便你按照順序閱讀和練習。 QUERY 可以用來查詢、篩選、聚集、排序資料,還可以做張簡易的資料透視表,是我在 Google 試算表上做數據分析、製作報告、製作儀表板時最常用的函式之一,既方便又好用,誠心推薦!
Thumbnail
這邊統整了所有過去發表過關於 QUERY 函式的教學分享,希望可以方便你按照順序閱讀和練習。 QUERY 可以用來查詢、篩選、聚集、排序資料,還可以做張簡易的資料透視表,是我在 Google 試算表上做數據分析、製作報告、製作儀表板時最常用的函式之一,既方便又好用,誠心推薦!
追蹤感興趣的內容從 Google News 追蹤更多 vocus 的最新精選內容追蹤 Google News