數據集成支持數據同步解決方案功能,您可以通過配置同步規則,一次性實時同步或離線同步數據至相應的數據源中。同步解決方案支持整庫內批量同步多張表,也支持全量、增量數據一體化同步,先同步全量數據,再實時同步增量數據。
進入同步解決方案頁面
- 登錄DataWorks控制臺。
- 在左側導航欄,單擊工作空間列表。
- 選擇工作空間所在地域后,單擊相應工作空間后的進入數據集成。
- 在左側導航欄,單擊同步任務,進入解決方案任務列表頁面。
您可以在該頁面新建同步解決方案,或查看已創建的方案及當前執行的狀態。
新建同步解決方案時,您可以根據需要選擇對應的數據同步解決方案,詳情可參見下文的
選擇同步方案。查看同步解決方案狀態時,包括以下狀態:
- 未運行:任務未開始執行。您可以單擊相應方案后的開始執行,執行當前方案。
說明 僅單擊未運行狀態后的任務配置,您可以編輯任務。其它狀態下的任務配置頁面,僅支持查看。
- 運行中:任務在運行中,無法終止。您需要等待任務執行結束。
- 異常:任務出錯,無法正常運行。此時您需要單擊相應任務后的執行詳情進行排查。
- 成功:任務成功運行。您可以單擊相應任務后的執行詳情,查看運行結果。
選擇同步方案
- 在同步解決方案頁面的右上角單擊新建任務。
- 在新建任務頁面選擇數據同步的來源與去向后,選擇可用的同步方案。
支持的來源數據源與去向數據源,可參見
支持的數據源,當前支持的同步方案如下所示。
根據數據同步的目的數據源類型進行分類,當前DataWorks數據同步支持以下幾種數據同步方案:
- 同步數據至DataHub:當前支持的數據同步解決方案為一鍵實時同步至DataHub。
- 同步數據至Elasticsearch:當前支持的數據同步解決方案為一鍵實時同步至Elasticsearch。
- 同步數據至Hologres:當前支持的數據同步解決方案為一鍵實時同步至Hologres。
- 同步數據至AnalyticDB MySQL3.0:當前支持的數據同步解決方案為一鍵實時同步至AnalyticDB MySQL3.0。
- 同步數據至Kafka:當前支持的數據同步解決方案為一鍵實時同步至Kafka。
- 同步數據至MaxCompute:當前支持的數據同步解決方案為
- 一鍵實時同步至MaxCompute
- 整庫離線同步至MaxCompute(周期性全量)
- 整庫離線同步至MaxCompute(周期性增量)
- 整庫離線同步至MaxCompute(一次性全量)
- 整庫離線同步至MaxCompute(一次性增量)
- 整庫離線同步至MaxCompute(一次性全量周期增量)