使用分類

• 命令。

  目前命令只能通過MaxCompute客戶端（odpscmd）執(zhí)行。

• 批量操作。

  普通Tunnel可以對數(shù)據(jù)進(jìn)行離線批操作，對數(shù)據(jù)進(jìn)行上傳與下載，包括單表數(shù)據(jù)上傳下載和查詢實(shí)例下載。

• 流式操作。

  Stream Tunnel可以對流式數(shù)據(jù)做數(shù)據(jù)微批的方式寫入表。

產(chǎn)品架構(gòu)

關(guān)于數(shù)據(jù)傳輸服務(wù)共享資源組和獨(dú)享數(shù)據(jù)傳輸服務(wù)（包年包月）的詳情，請參見購買與使用獨(dú)享數(shù)據(jù)傳輸服務(wù)資源組。

數(shù)據(jù)傳輸服務(wù)使用限制

• 批量數(shù)據(jù)通道使用限制說明。

  • 批量數(shù)據(jù)上傳。

    限制項	限制說明
    UploadSession生命周期	24小時。
    單UploadSession寫入Block個數(shù)	20000個。
    單Block寫入速度	10 MB/s。
    單Block寫入數(shù)據(jù)量	100 GB。
    單表創(chuàng)建UploadSession數(shù)	每5分鐘500個。
    單表寫入Block數(shù)	每5分鐘500個。
    單表并發(fā)提交UploadSession數(shù)	32個。
    并發(fā)寫入Block數(shù)	受Slot并發(fā)數(shù)限制，單次Block寫入占用一個Slot。
    并發(fā)寫入	MaxCompute會根據(jù)ACID進(jìn)行并發(fā)寫入的保障。關(guān)于ACID的具體語義請參見ACID語義。

  • 批量數(shù)據(jù)下載。

    限制項	限制說明
    DownloadSession生命周期	24小時。
    InstanceDownloadSession生命周期	24小時，受實(shí)例生命周期限制。
    單Project創(chuàng)建InstanceDownloadSession數(shù)	每5分鐘200個。
    單表創(chuàng)建DownloadSession數(shù)	每5分鐘200個。
    單次下載請求速度	10 MB/s。
    并發(fā)創(chuàng)建DownloadSession數(shù)	受Slot并發(fā)數(shù)限制，單次創(chuàng)建DownloadSession占用一個Slot。
    并發(fā)創(chuàng)建InstanceDownloadSession數(shù)	受Slot并發(fā)數(shù)限制，單次創(chuàng)建InstanceDownloadSession占用一個Slot。
    并發(fā)下載請求數(shù)	受Slot并發(fā)數(shù)限制，單次數(shù)據(jù)下載請求占用一個Slot。

  說明

  批量數(shù)據(jù)支持Delta Table的Upsert功能，使用限制如下：

  • UpsertSession生命周期：24小時（h）。

  • UpsertSession最大寫入速度：表或分區(qū)Bucket數(shù)*10 MB/s。

  • UpsertSession最大Slot Quota占用：表或分區(qū)Bucket數(shù)。

  • UpsertSession Commit頻率：Delta Table每個分區(qū)1分鐘（min）內(nèi)僅允許Commit 1次。如果某個分區(qū)Commit間隔小于1分鐘，將會收到ErrorCode=FlowExceeded, ErrorMessage=CommitUpsert QPS Quota exceeded系統(tǒng)報錯信息。

• 流式數(shù)據(jù)通道使用限制說明。

  限制項	限制說明
  單Slot寫入速度	1 MB/s。
  單Slot寫入請求數(shù)	每秒10個。
  單表并發(fā)寫入分區(qū)數(shù)	64個。
  單分區(qū)最大可用Slot數(shù)	32個。
  StreamUploadSession占用Slot數(shù)	受Slot并發(fā)數(shù)限制，創(chuàng)建StreamUploadSession時指定Slot數(shù)。

• 上傳數(shù)據(jù)限制。

  • 每個字段的大小不能超過該字段本身的限制，詳情請參見數(shù)據(jù)類型版本說明。

    說明

    STRING類型的字段大小不能超過8 MB。

  • 上傳的過程中會將多條數(shù)據(jù)打包成一個Package進(jìn)行上傳。

• 數(shù)據(jù)傳輸網(wǎng)絡(luò)限制（獨(dú)享資源組）。

  • 只支持云上VPC網(wǎng)絡(luò)訪問，暫時不支持公共網(wǎng)絡(luò)訪問。

  • 只支持同地域的數(shù)據(jù)傳輸服務(wù)，暫時不支持跨地域的數(shù)據(jù)傳輸服務(wù)。

數(shù)據(jù)傳輸服務(wù)共享資源組說明

數(shù)據(jù)傳輸服務(wù)有效狀態(tài)碼

• 請求失敗重試策略

  • 客戶端需要在收到請求失敗后等待一段時間再重新發(fā)起請求。

  • 連續(xù)失敗請求等待時間需要滿足指數(shù)增長規(guī)則，最短1秒。例如：1s，2s，4s，8s，16s，32s，32s...

• 重復(fù)請求

  • URL相同（URI和URI Parameter）。

  • 相同客戶端IP連續(xù)發(fā)起。

• 有效請求

  返回碼為有效狀態(tài)碼且滿足失敗重試策略。

• 非法請求

  返回碼為有效狀態(tài)碼但不滿足失敗重試策略的請求。

  說明

  非法請求不受服務(wù)SLA保障。

• 攻擊類請求

  • 針對流控狀態(tài)碼429、503，未遵守失敗重試策略的請求。

  • 針對攻擊類請求，服務(wù)側(cè)會對發(fā)起攻擊的客戶端IP、UID、Project進(jìn)行隔離處理，被隔離的對象無法正常訪問服務(wù)。

  說明

  攻擊類請求不受服務(wù)SLA保障。

常見問題