2024-11-05|閱讀時間 ‧ 約 0 分鐘

[GCP] GCS/BigQuery 建議的備份方法? (工作日常)


    使用 Storage Transfer 服務是否能降低成本?


    Storage Transfer 的計價方式針對從 Cloud Storage 轉移至 Cloud Storage,除了一般費用外,Storage 移轉服務會使用 Cloud Storage rewrite 作業在 Cloud Storage 值區之間移動資料 (A 級作業) 會另外收取,這筆也是您提到的 GCS 內收取的費用,因此不可避免的產生 9000 萬次的 Class A Operations,費用超過 450 美金。詳細定價請參閱 [1]


    一般費用是指:

    從某個 Cloud Storage 值區移轉至另一個 Cloud Storage 值區

    在 Cloud Storage 值區中重新寫入資料

    刪除 Cloud Storage 值區中的資料。(提前刪除費用)


    使用 Storage Transfer 是否能讓備份流程更加穩定、降低錯誤發生機率?


    Storage 移轉服務目前並無 Google SLA 的支持,因此 GCP 並無法保證錯誤發生以及發生後之任何賠償事宜


    ​另外,如果是 BigQuery 備份到 GCS,是否有建議的做法?


    BigQuery 備份到 GCS 的做法,目前在 BigQuery 中有內建 [2] 使用導出的功能將資料導出至 GCS,可以透過 GCP Console、 bq command 以及 API 來操作執行,使用此做法不須額外在啟用新服務


    [1] https://cloud.google.com/storage-transfer/pricing?hl=zh-tw

    [2] https://cloud.google.com/bigquery/docs/exporting-data?hl=zh-cn

    分享至
    成為作者繼續創作的動力吧!
    © 2024 vocus All rights reserved.