使用DataWorks獨享資源組能夠例行調度任務,提升數據處理效率和安全性,便于資源管理和團隊協作。本文介紹如何使用DataWorks獨享資源組安裝FeatureStore Python SDK。
前提條件
安裝方式 | 前提條件 |
|
操作步驟
方式一:使用新版獨享資源組(推薦)
登錄DataWorks控制臺,新增獨享資源組。
其中,關鍵參數配置如下,具體操作,請參見新增Serverless資源組。
參數
描述
專有網絡(VPC)
選擇已創建的專有網絡VPC。
交換機(V-Switch)
選擇已創建的交換機。
登錄NAT網關管理控制臺,創建NAT網關。
其中,關鍵參數配置如下,具體操作,請參見使用公網NAT網關SNAT功能訪問互聯網。
參數
描述
所屬專有網絡
選擇已創建的專有網絡VPC。
關聯交換機
選擇已創建的交換機。
彈性公網IP實例
選擇已創建的彈性公網IP實例。
登錄DataWorks控制臺,配置自定義鏡像。
創建自定義鏡像
其中,關鍵參數配置如下,具體操作,請參見創建自定義鏡像。
參數
描述
鏡像命名空間
選擇DataWorks Default。
鏡像名稱/ID
選擇dataworks_pyodps_task_pod。
支持任務類型
選擇PyODPS 3。
安裝包
選擇Script,并填入以下代碼:
/home/tops/bin/pip3 install https://feature-store-py.oss-cn-beijing.aliyuncs.com/package/feature_store_py-1.8.0-py3-none-any.whl
其中,工作空間選擇已創建的PAI(DataWorks)工作空間。
使用獨享資源組和已創建的自定義鏡像運行任務。
具體操作,請參見使用鏡像。
方式二:使用舊版獨享調度資源組
登錄DataWorks控制臺。
在左側導航欄單擊資源組。
在獨享資源組頁簽中,找到用途為數據調度的目標資源組,單擊圖標,選擇運維助手。
單擊創建命令,在彈出的頁面中配置命令參數。
參數
取值建議
命令名稱
可自定義名稱。本文以install為例進行說明。
命令類型
手動輸入(無法使用pip命令安裝第三方包)
命令內容
/home/tops/bin/pip3 install -i https://pypi.tuna.tsinghua.edu.cn/simple https://feature-store-py.oss-cn-beijing.aliyuncs.com/package/feature_store_py-1.3.1-py3-none-any.whl
超時時間
可自定義時間。
單擊創建,完成命令創建。
單擊運行命令,在彈出的頁面中單擊運行。
可單擊刷新查看最新執行狀態,待狀態為成功時,即表示完成安裝。