建構開放式、代管式且高效能的 Iceberg lakehouse,即可運用自動化資料管理和內建的治理機制,進行進階數據分析和資料科學。
功能
BigLake Metastore 是無伺服器的 metastore,可用來儲存所有 Iceberg 資料表。Apache Spark、BigQuery 和第三方平台等引擎都能用它來建立及管理資料表,讓您以一致的方式查看資料,並享有統一的存取控管機制。BigLake Metastore 現已支援 Apache Iceberg Rest Catalog (預先發布版),可輕鬆與 OSS 和第三方引擎整合。現已開放在 AlloyDB 中存取 Iceberg 資料表 (預先發布版),以利於交易和數據分析平台之間的互通性。
BigLake 擴充了 Google Cloud Storage 的管理功能,您可以使用 Storage 自動調整級別功能,來有效分層處理冷門資料,並將客戶自行管理的加密金鑰 (CMEK) 套用至 Storage bucket。BigLake metastore 已與 Dataplex Universal Catalog 原生整合,確保集中定義的治理政策在多個引擎中一致強制執行,同時提供語意搜尋、資料歷程、剖析和品質檢查功能。
Apache Iceberg 專用 BigLake 資料表:搭配 BigQuery 使用時,可提供企業級的完全代管 Iceberg 服務。您可以將 Apache Iceberg 資料儲存在自有的 Google Cloud Storage bucket 中,並運用 BigQuery 具備高度擴充性的即時中繼資料管理功能,同時享有 GCS 的開放性和資料擁有權,以及 BigQuery 的全代管功能,並將 Iceberg 資料用於串流、進階數據分析和 AI 用途。
常見用途
定價
BigLake 的定價方式 | BigLake 的定價是根據資料表管理、中繼資料儲存空間和中繼資料存取作業計算 | |
---|---|---|
服務與用途 | 說明 | 價格 (美元) |
BigLake 資料表管理 | BigLake 資料表管理運算資源,用於自動最佳化資料表儲存空間。 | 起始價 $0.12 美元 每 DCU 時數的價格 |
儲存 BigLake 中繼資料 | 儲存中繼資料會產生 BigLake Metastore 費用。免費方案每月提供 1 GiB 的中繼資料儲存空間。 | 起始價 $0.04 美元 每月每 GiB |
存取 BigLake 中繼資料 | A 級作業:執行寫入、更新、列出、建立及設定作業時,會產生 BigLake 中繼資料存取費用。免費方案每月可執行 5,000 次作業。 | 起始價 $6.00 每 100 萬個作業 |
B 級作業:執行讀取、取得及刪除作業時,會產生 BigLake 中繼資料存取費用。免費方案每月可執行 50,000 次作業。 | 起始價 $0.90 美元 每 100 萬個作業 |
BigLake 的定價方式
BigLake 的定價是根據資料表管理、中繼資料儲存空間和中繼資料存取作業計算
BigLake 資料表管理
BigLake 資料表管理運算資源,用於自動最佳化資料表儲存空間。
Starting at
$0.12 美元
每 DCU 時數的價格
儲存 BigLake 中繼資料
儲存中繼資料會產生 BigLake Metastore 費用。免費方案每月提供 1 GiB 的中繼資料儲存空間。
Starting at
$0.04 美元
每月每 GiB
存取 BigLake 中繼資料
A 級作業:執行寫入、更新、列出、建立及設定作業時,會產生 BigLake 中繼資料存取費用。免費方案每月可執行 5,000 次作業。
Starting at
$6.00
每 100 萬個作業
B 級作業:執行讀取、取得及刪除作業時,會產生 BigLake 中繼資料存取費用。免費方案每月可執行 50,000 次作業。
Starting at
$0.90 美元
每 100 萬個作業