獨享調(diào)度資源組
在任務高并發(fā)執(zhí)行且無法錯峰運行的情況下,需要專有的計算資源來保障任務定時被調(diào)度運行時,建議您選擇使用DataWorks的獨享調(diào)度資源組。本文為您概要介紹獨享調(diào)度資源組。
適用場景
對任務時效性要求高,避免公共資源組資源爭搶導致任務延時。
需要靈活調(diào)整資源組大小。
需要訪問公網(wǎng)地址、VPC、IDC。
需要通過IP白名單進行訪問控制。
DataWorks某些任務類型僅支持獨享資源組,包括EMR、CDH、ADB等。
使用限制
獨享調(diào)度資源組的購買計費類型為包年包月,在資源組到期前不支持提前刪除、釋放資源組,資源組到期后會按照規(guī)定的時間停服、釋放。
獨享調(diào)度資源組不支持跨地域使用。例如,華東2(上海)地域的獨享調(diào)度資源組,只能給華東2(上海)地域的工作空間使用。
獨享調(diào)度資源組不支持執(zhí)行yum命令。
性能指標
規(guī)格 | 最大并發(fā)運行實例數(shù) |
4c8g | 16 |
8c16g | 32 |
12c24g | 48 |
16c32g | 64 |
24c48g | 96 |
規(guī)格選擇及費用預估
您可以使用DataWorks獨享資源組計算器預估所需規(guī)格及相關費用。預估規(guī)格及相關費用時,可進入DataWorks的 ,查看資源運行的實例數(shù)、并發(fā)情況等信息作為參考。查看運維大屏,詳情請參見查看運維大屏。
計費與相關操作
如您需要專業(yè)的售前購買指導,請前往查看:DataWorks購買指引??梢允褂冕斸敀呙柘路蕉S碼加入DataWorks釘釘交流群溝通與售前咨詢。
(1)計費說明
獨享調(diào)度資源組的計費方式為包年包月,您可以根據(jù)自身需求選擇合適的規(guī)格進行購買,不同規(guī)格的計費詳情請參見獨享調(diào)度資源組計費說明:包年包月。
(2)擴容與縮容
您可以根據(jù)業(yè)務需求選擇購買獨享資源組,指定購買資源組內(nèi)機器規(guī)格、機器數(shù)量,購買完成后,您可以對資源組進行擴容或縮容操作,擴縮容操作步驟和注意事項請參見擴縮容操作。
(3)規(guī)格變更(升降配)
如果當前獨享資源組規(guī)格不符合實際需要,您可以針對該資源組進行規(guī)格變更。變更當前資源組的規(guī)格,資源組內(nèi)所有機器的規(guī)格將統(tǒng)一變更,規(guī)格變更操作步驟和注意事項請參見變更規(guī)格操作。
(4)續(xù)費、停服與釋放資源組
您可以在獨享資源組臨近到期時進行續(xù)費操作,或等待資源組到期后停服并自動釋放資源。詳情請參見到期說明及續(xù)費操作。
使用獨享調(diào)度資源組
了解上述獨享調(diào)度資源的規(guī)格計費詳情后,您可以選擇購買合適的獨享調(diào)度資源組并在數(shù)據(jù)集成、數(shù)據(jù)開發(fā)等任務中使用。從購買至使用,您需進行的主要操作流程如下:
購買獨享資源組。
綁定工作空間。
(可選)為獨享資源組綁定專有網(wǎng)絡。
(可選)添加白名單。
應用示例:獨享調(diào)度資源組。
操作詳情請參見新增和使用獨享調(diào)度資源組。
網(wǎng)絡連通方案
獨享調(diào)度資源組與其他資源組類似,本質(zhì)上為一組阿里云ECS實例,在進行數(shù)據(jù)開發(fā)等任務運行時,需保障資源組與數(shù)據(jù)源之間的網(wǎng)絡是連通的,且不會因為白名單等特殊安全訪問設置阻斷資源組與數(shù)據(jù)源之間的網(wǎng)絡連通性。
如果獨享調(diào)度資源組的應用過程中,不涉及與數(shù)據(jù)源的交互,則不涉及獨享調(diào)度資源組與數(shù)據(jù)源間的網(wǎng)絡連通問題,獨享調(diào)度資源組購買后即可直接使用,無需考慮網(wǎng)絡的相關影響。
獨享調(diào)度資源組購買后,需綁定一個VPC網(wǎng)絡,后續(xù)您可以根據(jù)數(shù)據(jù)源所在的網(wǎng)絡環(huán)境情況來選擇網(wǎng)絡連通方案。
- 網(wǎng)絡連通方案
數(shù)據(jù)源網(wǎng)絡環(huán)境 網(wǎng)絡連通方案 數(shù)據(jù)源處于公網(wǎng)環(huán)境中 數(shù)據(jù)源與獨享資源組綁定的VPC網(wǎng)絡直連即可連通。 數(shù)據(jù)源處于VPC網(wǎng)絡中,且與獨享資源組在同一地域 建議獨享資源組與數(shù)據(jù)源綁定同一VPC,綁定后系統(tǒng)自動為您添加一條路由至整個VPC的路由,您綁定VPC的任意一個交換機,獨享資源組與數(shù)據(jù)源的網(wǎng)絡都可連通。 數(shù)據(jù)源處于VPC網(wǎng)絡中,且與獨享資源組在不同地域 使用高速通道或VPN等將網(wǎng)絡連通數(shù)據(jù)源與獨享資源組綁定的VPC網(wǎng)絡,并添加一條路由指向目標數(shù)據(jù)庫IP,保障兩個網(wǎng)絡間網(wǎng)絡可達。 數(shù)據(jù)源處于IDC網(wǎng)絡中 使用高速通道或VPN等將網(wǎng)絡連通數(shù)據(jù)源與獨享資源組綁定的VPC網(wǎng)絡,并添加一條路由指向目標數(shù)據(jù)庫IP,保障兩個網(wǎng)絡間網(wǎng)絡可達。 數(shù)據(jù)源處于經(jīng)典網(wǎng)絡中 獨享資源組處于阿里云VPC網(wǎng)絡,如果數(shù)據(jù)源處于經(jīng)典網(wǎng)絡環(huán)境中,則數(shù)據(jù)源與獨享資源組間網(wǎng)絡無法連通,建議您將數(shù)據(jù)源遷移至VPC網(wǎng)絡中。 - 白名單配置
如果數(shù)據(jù)源設置有白名單限制訪問地址時,您需要將獨享資源組的訪問地址添加至數(shù)據(jù)源的訪問白名單中,避免訪問受限。詳情可參見使用獨享數(shù)據(jù)集成資源組執(zhí)行任務需要在數(shù)據(jù)庫添加的IP白名單。
常見問題
DataWorks獨享資源組的常見問題,詳情請參見獨享資源組。