Flink工作空間支持全托管存儲和綁定OSS Bucket兩種存儲類型(在開通時選擇)。本文為您介紹不同存儲類型下文件管理的使用方法。
使用限制
目前僅北京、上海、杭州和深圳地域開放全托管存儲。
查看存儲類型
登錄實時計算管理控制臺。
單擊目標工作空間操作列下的
,查看存儲類型。存儲類型
圖示
OSS Bucket
目錄說明
當您在開通Flink工作空間時存儲類型選擇為OSS Bucket,Flink將會在該Bucket中創建以下目錄存放相關文件。
目錄 | 內容 |
artifacts | 上傳的JAR包和附加依賴、Python文件和依賴都會被存儲到該目錄。 |
sql-artifacts | 注冊自定義函數和連接器所依賴的文件會被存儲到該目錄。 |
flink-jobs | Flink作業的HA(High Available)信息和系統檢查點信息會被存儲到該目錄。 |
flink-savepoints | 在實時計算開發控制臺上單擊創建快照,最終生成的快照文件會被存儲到該目錄。 |
flink-sessionclusters | Session集群的HA信息和系統檢查點信息會被存儲到該目錄。 |
plan | 使用專家模式時,配置的資源信息會被存儲到該目錄。 |
logs | 如果您將作業的日志配置輸出到OSS,則日志會被存儲到該目錄。 |
文件管理
登錄實時計算管理控制臺。
單擊目標工作空間操作列下的控制臺。
在左側導航欄,單擊文件管理,您可以進行如下操作。
上傳資源:單擊上傳資源后選擇本地文件上傳資源,或者直接將待上傳文件拖拽到資源列表區域。
上傳后,文件路徑格式為
oss://<您綁定的OSS Bucket名稱>/artifacts/namespaces/<項目空間名稱>/<文件名>
,您可以單擊文件名稱復制路徑。下載資源:單擊操作列的下載,可以將OSS Bucket的文件下載到本地進行查看。
刪除資源:單擊操作列的刪除,可以將OSS Bucket的文件直接刪除。
對于OSS Bucket存儲方式,您在此只能上傳、下載和刪除artifacts目錄的文件。
全托管存儲
登錄實時計算管理控制臺。
單擊目標工作空間操作列下的控制臺。
在左側導航欄,單擊文件管理。
單擊相應的頁簽進行相關操作。
頁簽
說明
資源文件
上傳作業資源,例如開發的作業文件、作業需要的相關數據文件或注冊自定義函數和連接器所依賴的文件等。
上傳后,文件路徑格式為
oss://flink-fullymanaged-<工作空間ID>/artifacts/namespaces/<項目空間名>/<文件名>
。作業狀態
展示作業運行生成的系統檢查點及作業快照文件、HA文件的大小和修改時間等信息。您可以單擊作業名稱跳轉到狀態集管理中進行配置和查看。
作業日志
展示作業運行生成的TaskManagers和JobManagers日志文件的大小和修改時間等信息。您可以單擊作業名稱跳轉到作業日志頁簽查看日志詳情。
編譯文件
展示作業運行生成的執行計劃和Job Graph文件的大小和修改時間等信息。您可以單擊作業名稱跳轉到部署詳情頁簽查看具體的執行計劃和Job Graph。
其他
其他類型的文件。