日本熟妇hd丰满老熟妇,中文字幕一区二区三区在线不卡 ,亚洲成片在线观看,免费女同在线一区二区

從PolarDB MySQL版同步至云原生數據倉庫 AnalyticDB MySQL 版

重要

本文中含有需要您注意的重要提示信息,忽略該信息可能對您的業務造成影響,請務必仔細閱讀。

云原生數據倉庫AnalyticDB MySQL是阿里巴巴自主研發的海量數據實時高并發在線分析(Realtime OLAP)云計算服務,可以對千億級數據進行毫秒級的即時多維分析透視和業務探索。通過數據傳輸服務DTS(Data Transmission Service),您可以將PolarDB MySQL版同步到云原生數據倉庫AnalyticDB MySQL,幫助您快速構建企業內部BI、交互查詢、實時報表等系統。

前提條件

注意事項

  • DTS在執行全量數據初始化時將占用源庫和目標庫一定的讀寫資源,可能會導致數據庫的負載上升,在數據庫性能較差、規格較低或業務量較大的情況下(例如源庫有大量慢SQL、存在無主鍵表或目標庫存在死鎖等),可能會加重數據庫壓力,甚至導致數據庫服務不可用。因此您需要在執行數據同步前評估源庫和目標庫的性能,同時建議您在業務低峰期執行數據同步(例如源庫和目標庫的CPU負載在30%以下)。

  • 請勿在數據同步時,對源庫的同步對象使用gh-ost或pt-online-schema-change等類似工具執行在線DDL變更,否則會導致同步失敗。

    說明

    如果同步的目標為云原生數據倉庫AnalyticDB MySQL(3.0),您可以使用DMS提供的相關功能來執行在線DDL變更,詳情請參見通過無鎖變更工單實現無鎖結構變更

  • 由于云原生數據倉庫AnalyticDB MySQL(3.0)本身的使用限制,當云原生數據倉庫AnalyticDB MySQL(3.0)集群中的節點磁盤空間使用量超過80%,該集群將被鎖定。請提前根據待同步的對象預估所需空間,確保目標集群具備充足的存儲空間。

  • 暫不支持同步前綴索引,如果源庫存在前綴索引可能導致數據同步失敗。

費用說明

同步類型鏈路配置費用
庫表結構同步和全量數據同步不收費。
增量數據同步收費,詳情請參見計費概述

術語/概念對應關系

PolarDB MySQL版

云原生數據倉庫AnalyticDB MySQL

數據庫

  • 云原生數據倉庫AnalyticDB MySQL(2.0):表組

  • 云原生數據倉庫AnalyticDB MySQL(3.0):數據庫

  • 云原生數據倉庫AnalyticDB MySQL(2.0):表

  • 云原生數據倉庫AnalyticDB MySQL(3.0):表

說明

關于云原生數據倉庫AnalyticDB MySQL中表組和表的相關介紹,請參見基本概念

支持同步的SQL操作

目標數據庫版本

支持的SQL操作

云原生數據倉庫AnalyticDB MySQL2.0

  • DDL操作:ADD COLUMN、DROP COLUMN、MODIFY COLUMN

  • DML操作:INSERT、UPDATE、DELETE

云原生數據倉庫AnalyticDB MySQL3.0

  • DDL操作:CREATE TABLE、DROP TABLE、RENAME TABLE、TRUNCATE TABLE、ADD COLUMN、DROP COLUMN、MODIFY COLUMN

  • DML操作:INSERT、UPDATE、DELETE

說明

如果在數據同步的過程中變更了源表的字段類型,同步作業將報錯并中斷。您可以手動修復,詳情請參見修復因變更字段類型導致的同步失敗

數據庫賬號的權限要求

數據庫

所需權限

PolarDB MySQL版

待同步對象的讀權限。

云原生數據倉庫AnalyticDB MySQL(2.0)

無需填寫數據庫賬號信息,DTS會自動創建賬號并授權。

云原生數據倉庫AnalyticDB MySQL(3.0)

讀寫權限。

數據庫賬號的創建和授權方法,請參見創建PolarDB MySQL數據庫賬號創建云原生數據倉庫AnalyticDB MySQL數據庫賬號

數據類型映射關系

詳情請參見結構初始化涉及的數據類型映射關系

操作步驟

  1. 購買數據同步任務

    說明

    購買時,選擇源實例為PolarDB、目標實例為AnalyticDB MySQL,并選擇同步拓撲為單向同步

  2. 登錄數據傳輸控制臺

    說明

    若數據傳輸控制臺自動跳轉至數據管理DMS控制臺,您可以在右下角的jiqiren中單擊返回舊版,返回至舊版數據傳輸控制臺。

  3. 在左側導航欄,單擊數據同步

  4. 同步作業列表頁面頂部,選擇同步的目標實例所屬地域。

  5. 定位至已購買的數據同步實例,單擊配置同步鏈路

  6. 配置同步通道的源實例及目標實例信息。

    配置源和目標實例信息

    類別

    配置

    說明

    同步作業名稱

    DTS會自動生成一個同步作業名稱,建議配置具有業務意義的名稱(無唯一性要求),便于后續識別。

    源實例信息

    實例類型

    固定為PolarDB實例,不可變更。

    實例地區

    購買數據同步實例時選擇的源實例地域信息,不可變更。

    PolarDB實例ID

    選擇源PolarDB MySQL版集群ID。

    數據庫賬號

    填入PolarDB MySQL版集群的數據庫賬號,權限要求請參見數據庫賬號的權限要求

    數據庫密碼

    填入數據庫賬號對應的密碼。

    目標實例信息

    實例類型

    固定為ADS,不可變更。

    實例地區

    購買數據同步實例時選擇的目標實例地域信息,不可變更。

    版本

    根據目標云原生數據倉庫AnalyticDB MySQL集群的版本,選擇2.03.0

    說明
    • 選擇為2.0后,DTS將自動創建數據庫賬號并進行授權,您無需配置數據庫賬號數據庫密碼

    • 選擇為3.0后,您還需要配置數據庫賬號數據庫密碼

    數據庫

    選擇目標云原生數據倉庫AnalyticDB MySQL的集群ID。

    數據庫賬號

    填入云原生數據倉庫AnalyticDB MySQL的數據庫賬號,權限要求請參見數據庫賬號的權限要求

    數據庫密碼

    填入數據庫賬號對應的密碼。

  7. 單擊頁面右下角的授權白名單并進入下一步

    如果源或目標數據庫是阿里云數據庫實例(例如RDS MySQL云數據庫MongoDB版等),DTS會自動將對應地區DTS服務的IP地址添加到阿里云數據庫實例的白名單中;如果源或目標數據庫是ECS上的自建數據庫,DTS會自動將對應地區DTS服務的IP地址添到ECS的安全規則中,您還需確保自建數據庫沒有限制ECS的訪問(若數據庫是集群部署在多個ECS實例,您需要手動將DTS服務對應地區的IP地址添到其余每個ECS的安全規則中);如果源或目標數據庫是IDC自建數據庫或其他云數據庫,則需要您手動添加對應地區DTS服務的IP地址,以允許來自DTS服務器的訪問。DTS服務的IP地址,請參見DTS服務器的IP地址段

    警告

    DTS自動添加或您手動添加DTS服務的公網IP地址段可能會存在安全風險,一旦使用本產品代表您已理解和確認其中可能存在的安全風險,并且需要您做好基本的安全防護,包括但不限于加強賬號密碼強度防范、限制各網段開放的端口號、內部各API使用鑒權方式通信、定期檢查并限制不需要的網段,或者使用通過內網(專線/VPN網關/智能網關)的方式接入。

  8. 配置同步策略及對象信息。

    配置同步策略和對象

    配置

    說明

    同步初始化

    默認情況下,您需要同時選中結構初始化全量數據初始化。預檢查完成后,DTS會將源實例中待同步對象的結構及數據在目標集群中初始化,作為后續增量同步數據的基線數據。

    目標已存在表的處理模式

    • 預檢查并報錯攔截:檢查目標數據庫中是否有同名的表。如果目標數據庫中沒有同名的表,則通過該檢查項目;如果目標數據庫中有同名的表,則在預檢查階段提示錯誤,數據同步作業不會被啟動。

      說明

      如果目標庫中同名的表不方便刪除或重命名,您可以更改該表在目標庫中的名稱,詳情請參見設置同步對象在目標實例中的名稱

    • 忽略報錯并繼續執行:跳過目標數據庫中是否有同名表的檢查項。

      警告

      選擇為忽略報錯并繼續執行,可能導致數據不一致,給業務帶來風險,例如:

      • 表結構一致的情況下,在目標庫遇到與源庫主鍵的值相同的記錄,則會保留目標集群中的該條記錄,即源庫中的該條記錄不會同步至目標數據庫中。

      • 表結構不一致的情況下,可能會導致無法初始化數據、只能同步部分列的數據或同步失敗。

    多表歸并

    • 選擇為:DTS將在每個表中增加__dts_data_source列來存儲數據來源,且不再支持DDL同步。

    • 選擇為:默認選項,支持DDL同步。

    說明

    多表歸并功能基于任務級別,即不支持基于表級別執行多表歸并。如果需要讓部分表執行多表歸并,另一部分不執行多表歸并,您可以創建兩個數據同步作業。

    同步操作類型

    根據業務選中需要同步的操作類型,支持的同步操作詳情請參見支持同步的SQL操作,默認情況下都處于選中狀態。

    選擇同步對象

    源庫對象框中單擊待同步的對象,然后單擊向右小箭頭圖標將其移動至已選擇對象框。

    同步對象的選擇粒度為庫、表。

    說明
    • 如果選擇整個庫作為同步對象,那么該庫中所有對象的結構變更操作會同步至目標庫。

    • 如果選擇某個表作為同步對象,那么只有這個表的ADD COLUMN操作會同步至目標庫。

    • 默認情況下,同步對象的名稱保持不變。如果您需要同步對象在目標集群上名稱不同,請使用對象名映射功能,詳情請參見設置同步對象在目標實例中的名稱

    映射名稱更改

    如需更改同步對象在目標實例中的名稱,請使用對象名映射功能,詳情請參見庫表列映射

    源表DMS_ONLINE_DDL過程中是否復制臨時表到目標庫

    如源庫使用數據管理DMS(Data Management)執行Online DDL變更,您可以選擇是否同步Online DDL變更產生的臨時表數據。

    • :同步Online DDL變更產生的臨時表數據。

      說明

      Online DDL變更產生的臨時表數據過大,可能會導致同步任務延遲。

    • :不同步Online DDL變更產生的臨時表數據,只同步源庫的原始DDL數據。

      說明

      該方案會導致目標庫鎖表。

    源、目標庫無法連接重試時間

    當源、目標庫無法連接時,DTS默認重試720分鐘(即12小時),您也可以自定義重試時間。如果DTS在設置的時間內重新連接上源、目標庫,同步任務將自動恢復。否則,同步任務將失敗。

    說明

    由于連接重試期間,DTS將收取任務運行費用,建議您根據業務需要自定義重試時間,或者在源和目標庫實例釋放后盡快釋放DTS實例。

  9. 上述配置完成后,單擊頁面右下角的下一步

  10. 設置待同步的表在目標庫中類型。

    設置表類型

    說明

    選擇了結構初始化后,您需要定義待同步的表在云原生數據倉庫AnalyticDB MySQL中的類型、主鍵列分區列等信息,詳情請參見ADB 2.0 SQL手冊ADB 3.0 SQL手冊

  11. 上述配置完成后,單擊頁面右下角的預檢查并啟動

    說明
    • 在同步作業正式啟動之前,會先進行預檢查。只有預檢查通過后,才能成功啟動同步作業。

    • 如果預檢查失敗,單擊具體檢查項后的提示,查看失敗詳情。

      • 您可以根據提示修復后重新進行預檢查。

      • 如無需修復告警檢測項,您也可以選擇確認屏蔽忽略告警項并重新進行預檢查,跳過告警檢測項重新進行預檢查。

  12. 預檢查對話框中顯示預檢查通過后,關閉預檢查對話框,同步作業將正式開始。

  13. 等待同步作業的鏈路初始化完成,直至處于同步中狀態。

    您可以在數據同步頁面,查看數據同步作業的狀態。查看同步作業狀態