2025 年 6 月上旬,Google 推出一系列資料雲端產品更新,涵蓋即時處理、Spark 整合與 AI 資料庫開發支援。
🔹 一、AI 與即時資料處理升級
① Pub/Sub 支援單訊息轉換(SMTs)
透過 JavaScript UDFs,在 Pub/Sub 中即時驗證、過濾與轉換訊息屬性或內容。
② Serverless Spark 整合 BigQuery 正式 GA
Serverless Spark(前身為 Dataproc Serverless)現可於 BigQuery Studio 中互動開發,內建 Lightning Engine,效能大幅提升。
③ Airflow 3 搶先支援 Cloud Composer 3
Google Cloud 成為第一家支援 Apache Airflow 3 的公有雲,提供 DAG 版本控管、排程器回補與新 React UI。
🔹 二、資料倉儲與工作負載管理
④ BigQuery 工作負載管理功能強化
更新涵蓋保留資源標籤、排程公平性、彈性資源控管與 autoscaler 優化。
⑤ BigQuery 支援交易型操作
推出三大能力:DML 微調、變更歷史記錄與串流資料即時更新。
🔹 三、資料庫整合與開發支援
⑥ Bigtable Spark Connector GA
Spark 可直接操作 Bigtable,並支援 Apache Iceberg,大幅拓展分析工作流程。
⑦ MCP Toolbox 強化資料庫支援
支援 BigQuery、Cloud SQL、AlloyDB、Spanner、Neo4j 等資料庫,讓開發者在 IDE 中透過 AI 助理操作資料庫。
🔗 原始連結:https://cloud.google.com/blog/products/data-analytics/whats-new-with-google-data-cloud