阿里云云備份提供非結構化文件系統(tǒng)類數(shù)據(jù)同步功能,可以將源端數(shù)據(jù)源(包括NAS、HDFS、S3兼容存儲、對象存儲OSS、CPFS、OSS協(xié)議兼容存儲等)同步至目的端數(shù)據(jù)源(包括阿里云上)。首次數(shù)據(jù)同步前,您需要添加源端數(shù)據(jù)源和目的端數(shù)據(jù)源。本文介紹如何在云備份控制臺添加數(shù)據(jù)源。
前提條件
已開通阿里云云備份服務。開通云備份不收取任何費用,數(shù)據(jù)同步功能公測中,不收取任何費用。
已完成授權和安裝客戶端。更多操作,請參見準備工作。
操作步驟
在左側導航欄,選擇同步>數(shù)據(jù)同步。
在頂部菜單欄左上角,選擇所在地域。
在數(shù)據(jù)源列表頁簽,單擊添加數(shù)據(jù)源。
在添加數(shù)據(jù)源面板,配置如下參數(shù),單擊確定。
配置重要參數(shù),描述如下:
參數(shù)
描述
數(shù)據(jù)源類型
數(shù)據(jù)源來源類型,此處選擇網絡附屬存儲(NAS)。
數(shù)據(jù)源名稱
數(shù)據(jù)源名稱。
NAS網絡地址
待同步數(shù)據(jù)的NAS的網絡地址。
NAS共享目錄
共享相對/根目錄的路徑,例如/myshare,表示共享/myshare路徑,用于后續(xù)數(shù)據(jù)同步。
如何查詢NAS共享目錄,請參見如何查詢NAS共享目錄。
僅支持中文、英文大小寫,數(shù)字以及特殊符號
,-_=/.:\
。說明在大多數(shù)情況下,文件存儲 NAS的NFS協(xié)議文件系統(tǒng)掛載后的根目錄為
/
,而SMB協(xié)議文件系統(tǒng)掛載后的根目錄為/myshare
。然而,請注意,在實際操作中,掛載的目錄可能會有所不同。因此,請根據(jù)您的實際掛載情況進行操作。
協(xié)議類型
支持的NAS協(xié)議類型。
NFS:NAS的協(xié)議是NFS時,選擇該值。
SMB:NAS的協(xié)議是SMB時,選擇該值。
GlusterFS:NAS的協(xié)議是GlusterFS時,選擇該值。
重要如果您掛載的是阿里云NAS,請在高級設置里設置參數(shù)vers的取值。
必須在客戶端機器上安裝NFS/SMB/GlusterFS客戶端。您可以參考如下命令安裝NFS/SMB/GlusterFS客戶端。
NFS -CentOS: sudo yum install nfs-utils -Ubuntu: sudo apt-get install nfs-common SMB -Centos: sudo yum install cifs-utils -Ubuntu: sudo apt-get install cifs-utils -openSUSE: sudo zypper install cifs-utils GlusterFS -CentOS: sudo yum install glusterfs-client -Ubuntu: sudo apt-get install glusterfs-client -Reference: https://docs.gluster.org/en/latest/Install-Guide/Overview/
(可選)單擊高級設置,然后單擊+配置掛載參數(shù)。
各掛載參數(shù)說明如下表所示。
參數(shù)
描述
vers
文件系統(tǒng)版本。
vers=3:使用NFS v3協(xié)議掛載文件系統(tǒng)。
vers=4:使用NFS v4協(xié)議掛載文件系統(tǒng)。
vers=4.0:使用NFS v4.0協(xié)議掛載文件系統(tǒng)。
nolock
是否啟用文件鎖。
proto
文件系統(tǒng)掛載協(xié)議。
rsize
定義數(shù)據(jù)塊的大小,用于客戶端與文件系統(tǒng)之間讀取數(shù)據(jù)。
建議值:1048576字節(jié)
wsize
定義數(shù)據(jù)塊的大小,用于客戶端與文件系統(tǒng)之間寫入數(shù)據(jù)。
建議值:1048576字節(jié)
hard
在文件存儲NAS暫時不可用的情況下,使用文件系統(tǒng)上某個文件的本地應用程序時會停止并等待至該文件系統(tǒng)恢復在線狀態(tài)。建議啟用該參數(shù)。
timeo
指定時長,單位為0.1秒,即NFS客戶端在重試向文件系統(tǒng)發(fā)送請求之前等待響應的時間。
建議值:600(60秒)
retrans
NFS客戶端重試請求的次數(shù)。
建議值:2
配置重要參數(shù),描述如下:
參數(shù)
描述
數(shù)據(jù)源類型
數(shù)據(jù)源來源類型,此處選擇Hadoop分布式文件系統(tǒng)(HDFS)。
數(shù)據(jù)源名稱
用于表示HDFS的數(shù)據(jù)源名稱。您可以根據(jù)情況自行定義合適的名稱。例如back-end-hdfs。
NameNode 網絡地址
用于表示HDFS主服務器的網絡地址。
NameNode作為主服務器,管理HDFS文件系統(tǒng)的命名空間和客戶端對文件的訪問操作。例如網絡地址為
47.100.XX.XX
,端口為9000
,則數(shù)據(jù)源地址為47.100.XX.XX:9000
。NameNode 端口
用于表示HDFS主服務器的端口號。例如
9000
。Secondary NameNode 網絡地址
用于表示HDFS的輔助節(jié)點網絡地址。
輔助節(jié)點用于協(xié)助主服務器的管理工作。
Secondary NameNode 端口
用于表示HDFS的輔助節(jié)點網絡端口號。
HDFS用戶名
用于表示HDFS的用戶名。
說明請確保HDFS用戶有足夠的權限(推薦用hadoop或hdfs),否則可能導致數(shù)據(jù)同步時無法讀取文件。
配置重要參數(shù),描述如下:
參數(shù)
描述
數(shù)據(jù)源類型
數(shù)據(jù)源來源類型,此處選擇阿里云對象存儲(OSS)。
數(shù)據(jù)源名稱
用于表示OSS數(shù)據(jù)源名稱。
用HTTPS傳輸數(shù)據(jù)
選擇是否使用HTTPS傳輸數(shù)據(jù)。相比HTTP傳輸,HTTPS傳輸擁有更高的安全性。
OSS Bucket
從下拉框中選擇待同步的OSS Bucket名稱。云備份會自動獲取您賬號下該地域的所有Bucket列表。
OSS Endpoint
從下拉框中選擇OSS Bucket的Endpoint。OSS各地域Endpoint請參見訪問域名和數(shù)據(jù)中心。
如果通過公網進行數(shù)據(jù)同步,請選擇Bucket的公網域名。例如杭州為
oss-cn-hangzhou.aliyuncs.com
。如果通過阿里云VPC進行數(shù)據(jù)同步,請選擇Bucket的內網域名。例如杭州為
oss-cn-hangzhou-internal.aliyuncs.com
。
配置重要參數(shù),描述如下:
參數(shù)
描述
數(shù)據(jù)源名稱
用于表示文件存儲CPFS的數(shù)據(jù)源名稱。該名稱便于您快速識別數(shù)據(jù)源,您可以根據(jù)情況自行定義合適的名稱。例如cpfs。
CPFS掛載路徑
文件存儲CPFS的掛載路徑。例如掛載路徑為
/cpfs/00d0******1b-000001
。如果您的文件存儲CPFS還未添加POSIX掛載點、安裝CPFS-POSIX客戶端。請先添加掛載點和完成安裝。具體操作,請參見快速入門(CPFS-POSIX)。
您可以在CPFS集群管理節(jié)點執(zhí)行以下命令,查詢CPFS集群實例狀態(tài)、查詢掛載路徑。
執(zhí)行命令
mmgetstate -a
返回示例
Node number Node name GPFS state --------------------------------------------------------------- 1 cpfs-00d0******1b-000001-qr-001 active 2 cpfs-00d0******1b-000001-qr-002 active 3 cpfs-00d0******1b-000001-qr-003 active 4 iZbp******haqrZ active
執(zhí)行命令
df -h
返回示例
Filesystem Size Used Avail Use% Mounted on devtmpfs 3.8G 0 3.8G 0% /dev tmpfs 3.8G 16K 3.8G 1% /dev/shm tmpfs 3.8G 528K 3.8G 1% /run tmpfs 3.8G 0 3.8G 0% /sys/fs/cgroup /dev/vda1 40G 7.3G 33G 19% / tmpfs 763M 0 763M 0% /run/user/0 00d0******1b-000001 3.6T 564M 3.6T 1% /cpfs/00d0******1b-000001
其中,
/cpfs/00d0******1b-000001
為CPFS掛載路徑。
配置重要參數(shù),描述如下:
參數(shù)
描述
數(shù)據(jù)源類型
數(shù)據(jù)源來源類型,此處選擇OSS協(xié)議兼容存儲。
數(shù)據(jù)源名稱
用于表示OSS協(xié)議兼容存儲的數(shù)據(jù)源名稱。您可以根據(jù)情況自行定義合適的名稱。例如oss-bucket。
用HTTPS傳輸數(shù)據(jù)
選擇是否使用HTTPS傳輸數(shù)據(jù)。相比HTTP傳輸,HTTPS傳輸擁有更高的安全性。
OSS Bucket
OSS協(xié)議兼容存儲的Bucket名稱。由存儲服務商提供。
OSS Endpoint
由存儲服務商提供專有網絡地址(Endpoint)。請從OSS協(xié)議兼容存儲管理員處獲取Endpoint。
AccessKey ID
由存儲服務商提供訪問專有網絡的AccessKey ID和AccessKey Secret。請從OSS兼容存儲管理員處獲取訪問密鑰,該Key應該具有完全讀取OSS協(xié)議兼容存儲數(shù)據(jù)的權限。
AccessKey Secret
配置重要參數(shù),描述如下:
參數(shù)
描述
數(shù)據(jù)源類型
數(shù)據(jù)源來源類型,此處選擇S3協(xié)議兼容存儲。
數(shù)據(jù)源名稱
用于表示S3的數(shù)據(jù)源名稱。您可以根據(jù)情況自行定義合適的名稱。例如awss3。
用HTTPS傳輸數(shù)據(jù)
選擇是否使用HTTPS傳輸數(shù)據(jù)。相比HTTP傳輸,HTTPS傳輸擁有更高的安全性。
S3存儲桶
用于表示S3存儲空間名稱。
S3 Endpoint
用于表示可用于執(zhí)行S3對象操作的存儲空間的網絡終端節(jié)點。例如:
s3.us-east-1.amazonaws.com
。請從S3兼容存儲管理員處獲取Endpoint。Access Key
用于表示以IAM身份訪問S3的安全憑證。請從S3兼容存儲管理員處獲取訪問密鑰,該Key應該具有完全讀取S3數(shù)據(jù)的權限。
Secret Key
添加完成后,您可以在數(shù)據(jù)源列表頁簽看到已添加數(shù)據(jù)源。
相關操作
對于已經添加的數(shù)據(jù)源,您還可以在目標數(shù)據(jù)源的更多中,執(zhí)行如下操作:
操作 | 描述 |
編輯數(shù)據(jù)源 | 修改您已創(chuàng)建的數(shù)據(jù)源配置參數(shù)。 |
注銷數(shù)據(jù)源 | 當您確認不需要同步數(shù)據(jù)時,可以注銷數(shù)據(jù)源。注銷后,不再進行數(shù)據(jù)同步。
|