數據集成支持數據同步解決方案功能,您可以通過配置同步規則,一次性實時同步或離線同步數據至相應的數據源中。同步解決方案支持整庫內批量同步多張表,也支持全量、增量數據一體化同步,先同步全量數據,再實時同步增量數據。

進入同步解決方案頁面

  1. 登錄DataWorks控制臺
  2. 在左側導航欄,單擊工作空間列表
  3. 選擇工作空間所在地域后,單擊相應工作空間后的進入數據集成
  4. 在左側導航欄,單擊同步任務,進入解決方案任務列表頁面。
    您可以在該頁面新建同步解決方案,或查看已創建的方案及當前執行的狀態。
    新建同步解決方案時,您可以根據需要選擇對應的數據同步解決方案,詳情可參見下文的選擇同步方案。查看同步解決方案狀態時,包括以下狀態:
    • 未運行:任務未開始執行。您可以單擊相應方案后的開始執行,執行當前方案。
      說明 僅單擊未運行狀態后的任務配置,您可以編輯任務。其它狀態下的任務配置頁面,僅支持查看。
    • 運行中:任務在運行中,無法終止。您需要等待任務執行結束。
    • 異常:任務出錯,無法正常運行。此時您需要單擊相應任務后的執行詳情進行排查。
    • 成功:任務成功運行。您可以單擊相應任務后的執行詳情,查看運行結果。

選擇同步方案

  1. 在同步解決方案頁面的右上角單擊新建任務
  2. 在新建任務頁面選擇數據同步的來源與去向后,選擇可用的同步方案。
    支持的來源數據源與去向數據源,可參見支持的數據源,當前支持的同步方案如下所示。選擇可用的同步方案根據數據同步的目的數據源類型進行分類,當前DataWorks數據同步支持以下幾種數據同步方案:
    • 同步數據至DataHub:當前支持的數據同步解決方案為一鍵實時同步至DataHub
    • 同步數據至Elasticsearch:當前支持的數據同步解決方案為一鍵實時同步至Elasticsearch
    • 同步數據至Hologres:當前支持的數據同步解決方案為一鍵實時同步至Hologres
    • 同步數據至AnalyticDB MySQL3.0:當前支持的數據同步解決方案為一鍵實時同步至AnalyticDB MySQL3.0
    • 同步數據至Kafka:當前支持的數據同步解決方案為一鍵實時同步至Kafka
    • 同步數據至MaxCompute:當前支持的數據同步解決方案為
      • 一鍵實時同步至MaxCompute
      • 整庫離線同步至MaxCompute(周期性全量)
      • 整庫離線同步至MaxCompute(周期性增量)
      • 整庫離線同步至MaxCompute(一次性全量)
      • 整庫離線同步至MaxCompute(一次性增量)
      • 整庫離線同步至MaxCompute(一次性全量周期增量)