快速配置存儲(chǔ)優(yōu)化策略
本文為您介紹在數(shù)據(jù)湖構(gòu)建中如何快速配置存儲(chǔ)優(yōu)化策略。
開通存儲(chǔ)優(yōu)化不收費(fèi)。啟用存儲(chǔ)優(yōu)化策略后,使用自有計(jì)算資源時(shí),相應(yīng)的計(jì)算資源產(chǎn)品會(huì)收費(fèi)。
策略說明
系統(tǒng)支持以下四種存儲(chǔ)優(yōu)化策略,您可按需使用。
Compaction:根據(jù)調(diào)度配置,定期將小文件合并,提高存儲(chǔ)訪問性能。
過期快照清理(Snapshot Expire):根據(jù)快照保留時(shí)間,清理較老快照,同時(shí)清理這些快照獨(dú)占的數(shù)據(jù)文件,降低存儲(chǔ)成本。
過期分區(qū)清理(Partition Expire):根據(jù)分區(qū)保留時(shí)間,過期后把分區(qū)刪除掉,降低存儲(chǔ)成本。
廢棄文件清理(Orphan File Remove):根據(jù)廢棄文件保留時(shí)間,自動(dòng)進(jìn)行清理,降低存儲(chǔ)成本。廢棄文件比如前述過期遺留的一些文件,或是因?yàn)閷憯?shù)據(jù)作業(yè)失敗導(dǎo)致遺留的一些碎片。
操作步驟
進(jìn)入需進(jìn)行優(yōu)化資源的存儲(chǔ)優(yōu)化頁(yè)面,資源可以是Catalog、數(shù)據(jù)庫(kù)、數(shù)據(jù)表。
單擊相應(yīng)策略旁的按鈕,啟用相應(yīng)的存儲(chǔ)優(yōu)化策略。
說明第一次啟用存儲(chǔ)優(yōu)化策略時(shí),需要開通存儲(chǔ)優(yōu)化服務(wù)。
選擇計(jì)算資源。如果沒有計(jì)算資源,需要先添加計(jì)算資源,目前系統(tǒng)支持添加全托管版Flink。
單擊確定,啟用成功后,策略狀態(tài)變?yōu)?img id="adcbd37df76qy" src="https://help-static-aliyun-doc.aliyuncs.com/assets/img/zh-CN/4512176271/p849031.png" alt="image" placement="inline" class="image inline">。
您可以單擊立即執(zhí)行,也可單擊調(diào)度配置,調(diào)度執(zhí)行。
執(zhí)行成功后,可以在優(yōu)化效果和最新執(zhí)行歷史中查看優(yōu)化結(jié)果。