BigQuery 資料移轉服務簡介

BigQuery 資料移轉服務可讓您自動執行排定的代管資料移轉作業,將資料移轉至 BigQuery。設定資料移轉作業後,BigQuery 資料移轉服務會定期自動將資料載入 BigQuery。您也可以主動執行資料補充作業,以填補任何中斷或缺漏、複製資料集,以及執行排定的查詢。您無法使用 BigQuery 資料移轉服務將資料從 BigQuery 移出。

如要設定及管理移轉作業,可以使用 Cloud de Confiance 控制台、bq 指令列工具或 BigQuery 資料移轉服務 API。「Pipelines & Connections」(管道與連線) 頁面也提供簡化的工作流程 (預先發布版),可用於建立移轉作業。如要接收服務更新,請訂閱 BigQuery DTS 公告群組。

支援的資料來源

BigQuery 資料移轉服務支援從下列資料來源載入資料:

資料傳送服務等級目標注意事項

資料傳送服務等級目標適用於使用 BigQuery 資料移轉服務,從 Cloud de Confiance by S3NS內來源自動排定的資料移轉作業。

如果資料移轉作業涉及第三方或非Cloud de Confiance by S3NS 來源,這些來源的服務中斷可能會影響 BigQuery 資料移轉服務的效能。因此,資料傳送服務等級目標不適用於從非Cloud de Confiance by S3NS 來源移轉 BigQuery 資料移轉服務資料。

支援的地區

與 BigQuery 相同,BigQuery 資料移轉服務也是多區域資源,並提供許多額外的單一區域。

建立目的地資料集來儲存 BigQuery 資料移轉服務移轉的資料時,您要指定 BigQuery 資料集的所在位置。設定移轉作業時,移轉設定本身會設為與目的地資料集相同的位置。BigQuery 資料移轉服務會在與目的地資料集相同的位置處理及暫存資料。

BigQuery 資料移轉服務支援從任何資料儲存區域,將資料移轉至目的地資料集所在的任何位置。

如要進一步瞭解 BigQuery 資料移轉服務的移轉作業和區域相容性,請參閱「資料集位置和移轉作業」。如要瞭解 BigQuery 支援的區域,請參閱「資料集位置」。

使用預留項目運算單元進行資料移轉

只有在專案、資料夾或組織指派給具有下列任一工作類型的預留項目時,BigQuery 資料移轉服務觸發的工作才會使用預留項目運算單元:

  • 使用 QUERY 查詢工作
  • 使用 PIPELINE 載入工作

定價

如要瞭解 BigQuery 資料移轉服務的定價,請參閱「定價」頁面。

資料移轉至 BigQuery 後,適用標準 BigQuery 儲存空間和查詢定價。

配額

如要瞭解 BigQuery 資料移轉服務配額,請參閱「配額與限制」頁面。

排解移轉設定問題

如要瞭解如何解決 BigQuery 資料移轉服務的問題,請參閱「排解移轉設定問題」。

後續步驟

  • 如要瞭解如何建立移轉作業,請參閱資料來源的說明文件。