2025 年 5 月公告：Dataproc Serverless 現已改稱 Google Cloud Serverless for Apache Spark
Google Cloud Serverless for Apache Spark
專心編寫程式碼，不必再費心管理基礎架構
在可自訂的零作業平台輕鬆執行 Apache Spark 工作、在 Gemini 的協助下更聰明地工作，以及運用 Lightning Engine 的效能加快工作速度。
Apache Spark 是 Apache Software Foundation 的商標。
功能
領先業界的效能
Lightning Engine 是新一代向量化引擎，可大幅提升工作效率。這項服務可自動將無伺服器 Spark 工作負載的效能提升 4.3 倍以上，並降低 TCO。
AI 輔助開發
加快整個工作流程。在 BigQuery Studio 中使用 Gemini Code Assist 編寫 PySpark、Scala 和 Java 程式碼並進行偵錯，還能透過預先設定的機器學習執行階段，啟動 GPU 加速環境。
整合 Spark 和 SQL 體驗
不需切換環境。在 BigQuery Studio 等單一環境中開發及執行工作負載，因為在同一個筆記本中，強大的 SQL 與彈性的 PySpark 完美結合。
兩種效能等級
| 兩種效能等級 | 提供多種方案，無論是標準批次處理作業，還是效能至關重要的嚴苛工作，都能滿足您的特定需求。 |
|---|---|
| 級別 | 適用情境 |
標準 | 符合成本效益，非常適合用於批次處理、資料轉換和一般用途的 Spark 工作。
|
進階 | 適合要求最嚴苛的工作負載，提供 Lightning Engine、AI/機器學習加速功能和互動式功能，可發揮最大效能。
|
兩種效能等級
提供多種方案，無論是標準批次處理作業，還是效能至關重要的嚴苛工作，都能滿足您的特定需求。
標準
符合成本效益，非常適合用於批次處理、資料轉換和一般用途的 Spark 工作。
- 一般用途 Spark ETL
- 已排定的資料管道
- 預算有限的批次工作
進階
適合要求最嚴苛的工作負載，提供 Lightning Engine、AI/機器學習加速功能和互動式功能，可發揮最大效能。
- Lightning Engine 可將效能提升 4.3 倍，適合用於著重效能的工作
- 互動式資料科學與分析
- GPU 加速 AI 和機器學習
- 複雜的大規模資料處理作業
常見用途
互動式資料科學
互動式資料科學
協助資料科學家探索資料，並快速疊代 Spark 機器學習模型。在單一 BigQuery Studio 筆記本中整合 SQL 和 Spark，從使用 SQL 探索資料，到使用 PySpark 建構模型，都能順暢進行，完全不必管理基礎架構。
教學課程、快速入門導覽課程和研究室
互動式資料科學
互動式資料科學
協助資料科學家探索資料，並快速疊代 Spark 機器學習模型。在單一 BigQuery Studio 筆記本中整合 SQL 和 Spark，從使用 SQL 探索資料，到使用 PySpark 建構模型，都能順暢進行，完全不必管理基礎架構。
定價
| 公開透明的價值導向計費模式 | Serverless for Apache Spark 會依據運算單元 (DCU)、GPU 和重組儲存空間的用量，以秒為單位計費。 | |
|---|---|---|
| 服務與用途 | 訂閱方案類型 | 價格 (美元) |
資料運算單元 (DCU) | 標準 | 起始價 $0.06 美元 每小時 |
進階 | 起始價 $0.089 美元 每小時 | |
重組儲存空間 | 標準 | 起始價 $0.04 美元 每 GB 每個月的價格 |
進階 | 起始價 $0.1 美元 每 GB 每個月的價格 | |
加速器定價 | a100 40 GB | 起始價 $3.52069 美元 每小時 |
a100 80 GB | 起始價 $4.713696 美元 每小時 | |
L4 | 起始價 $0.672048 美元 每小時 | |
查看 Google Cloud Serverless for Apache Spark 的定價詳細資料。
公開透明的價值導向計費模式
Serverless for Apache Spark 會依據運算單元 (DCU)、GPU 和重組儲存空間的用量，以秒為單位計費。
資料運算單元 (DCU)
標準
Starting at
$0.06 美元
每小時
進階
Starting at
$0.089 美元
每小時
重組儲存空間
標準
Starting at
$0.04 美元
每 GB 每個月的價格
進階
Starting at
$0.1 美元
每 GB 每個月的價格
加速器定價
a100 40 GB
Starting at
$3.52069 美元
每小時
a100 80 GB
Starting at
$4.713696 美元
每小時
L4
Starting at
$0.672048 美元
每小時
查看 Google Cloud Serverless for Apache Spark 的定價詳細資料。
企業案例
建構 Google Cloud Serverless for Apache Spark 業務應用案例
Google Cloud Dataproc 和 Serverless Spark 與其他替代解決方案的經濟效益比較
瞭解與地端部署和其他雲端解決方案相比，Serverless for Apache Spark 如何大幅降低 TCO，並創造業務價值。
在報表中：
瞭解與其他雲端式 Spark 替代方案相比，Dataproc 和 Serverless for Apache Spark 如何省下 18% 到 60% 的費用。
瞭解 Google Cloud Serverless for Apache Spark 如何提供比其他無伺服器 Spark 產品高出 21% 至 55% 的成本效益。
瞭解 Dataproc 和 Google Cloud Serverless for Apache Spark 如何簡化 Spark 部署作業，並降低營運複雜度。
常見問題
我該選擇 Serverless for Apache Spark 還是 Dataproc？
如果想專注於程式碼，並省去所有基礎架構管理工作，請選擇 Serverless for Apache Spark。適合用於新的 Spark 管道、互動式分析，以及需求難以預測的工作，這類工作會優先考量速度和便利性。
我需要安裝自己的程式庫，例如 PyTorch 或 XGBoost 嗎？
進階級專為 AI/機器學習設計，並提供預先設定的機器學習執行階段，其中內建 PyTorch、XGBoost 和 scikit-learn 等常見程式庫。您不必進行複雜的設定，就能在幾分鐘內開始處理資料科學工作負載。
如何獲得最佳效能？費用如何計算？
如要獲得最佳效能，可以選取由 Lightning Engine 提供支援的進階級。我們採「用多少付多少」的定價模式，因此您只需要支付工作執行期間的費用，且以秒為單位計費。這項做法可消除閒置叢集的成本，因此符合成本效益。