在數據實驗室中,您可以使用模擬數據或現有數據集來熟悉日志服務的各種操作。本文介紹如何使用日志服務數據實驗室。
前提條件
已開通日志服務。
首次登錄日志服務控制臺時,根據頁面提示開通日志服務。
已完成云資源訪問授權。
首次使用數據實驗室時,在數據實驗室的首頁,單擊前往授權完成云資源訪問授權。
收費與限制
目前數據實驗室提供網站訪問日志、數據庫審計日志、新冠疫情數據集三個場景,均免費使用。
在數據實驗室中Logstore僅用于存儲模擬數據,數據保留7天,shard數量為1。您無法進行數據寫入、編輯索引等操作。
場景選擇
數據分為模擬數據和數據集。
模擬數據:根據模擬配置生成的數據。您可以根據需求修改部分字段值及時間范圍等配置,數據模擬任務會根據您的配置產生數據。目前提供網站訪問日志和數據庫審計日志兩種場景。
數據集:來自于各種場景的真實日志數據,目前提供新冠疫情數據集場景。
操作步驟
此處以數據庫審計日志場景為例進行說明。
登錄日志服務控制臺。
在日志應用區域,單擊數據實驗室中的進入應用。
在數據實驗室首頁頁面中,單擊數據庫審計日志中的初始化,生成數據庫審計場景,包括模擬日志、查詢、內建報表等。
此處可調整日志字段值、范圍頻率等配置。也可以使用默認配置。
在日志字段頁簽中,包括字段名稱、字段數據類型。您可以根據需求,調整字段取值范圍和權重值。
在范圍頻率頁簽中,可調整如下參數。
參數
說明
時間范圍
指定模擬數據生成的起始時間與結束時間。如果不指定結束時間,會持續生成模擬數據。
數據量分布模型
數據量分布模型,包括隨機、周期與線性。您可以自定義變化周期、最小值、最大值和抖動值。
變化周期:數據量分布變化周期,支持秒、分鐘、小時、天和周。
最小值:每秒最小數據量。
最大值:每秒最大數據量。
抖動值:例如設置抖動為0.1,模型數據量為count,則最終的數據量在[0.9*count, 1.1*count]之間隨機。
數據量異常點
在數據量分布模型中所確定的數據量的基礎上,隨機選擇某些周期,在這些周期內的數據量會出現異常變化,您可以指定出現異常點的概率和異常點數據量變化的倍率。 您可以配置多個異常選項,每個數據周期最多出現一個異常點,優先模擬排在第一個的異常選項。
單擊開始導入,數據實驗室將自動完成創建項目和Logstore、創建模擬任務、創建數據場景和數據模擬等任務。
說明數據模擬任務需要大約1分鐘的時間。
數據導入完成后,單擊開始使用,進入報表中心頁面。
后續操作
您可參考數據庫審計日志操作步驟,完成網站訪問日志和新冠疫情數據集初始化。