本文中含有需要您注意的重要提示信息,忽略該信息可能對您的業務造成影響,請務必仔細閱讀。
日志服務聯合阿里云負載均衡推出CloudLens for ALB,提供ALB 7層日志分析、秒級監控指標分析、實時告警等功能,并提供基于AIOps的自動異常巡檢功能。您可以通過CloudLens for ALB了解客戶端用戶行為、客戶端用戶的地域分布、請求成功率、響應延遲等。本文介紹CloudLens for ALB的功能、資產、費用、使用限制等信息。
產品試用
SLS Playground中的CloudLens for ALB Demo,內置了ALB實例、演示數據、可視化圖表等資源,提供了完整的演示環境,便于您快速了解及體驗功能。
您可以單擊CloudLens for ALB,進行試用。
SLS Playground中的數據為演示數據,請勿用于生產環境。
功能說明
CloudLens for ALB基于實時訪問日志進行自動聚合,并提供智能巡檢、實時告警等功能,詳細功能如下:
支持集中管理當前阿里云賬號下所有的ALB實例。
支持一鍵開啟ALB訪問日志的采集功能,集中管理日志的采集狀態。
提供ALB訪問日志的實時存儲、查詢與分析。
基于原始訪問日志實時提取各類指標信息,包括PV、請求成功率、平均延遲、P50延遲、P99延遲、出入流量等。并支持多個維度組合,包括app_lb_id、host、status。
提供豐富的可視化報表,包括監控中心、秒級監控、實例巡檢等,并支持報表郵件、釘釘群訂閱。
提供智能巡檢功能,支持全局巡檢和app_lb_id粒度巡檢,并支持在可視化報表中直接標注異常點。
自定義告警配置,告警通知直接對接消息中心、短信、郵件、語音(電話)、釘釘,并支持對接自定義WebHook。
功能優勢
簡單:一站式開通、中心化使用,無需關心日志收集、存儲、計算、可視化等問題,將開發、運維人員從日志處理的繁瑣耗時中解放出來,將更多的精力集中到業務開發和技術探索。
海量:訪問日志與ALB實例請求PV成正比,數據規模很大,處理訪問日志需要考慮性能和成本問題。
實時:DevOps、監控、報警等場景要求日志數據的實時性。負載均衡結合日志服務強大的大數據計算能力,秒級分析處理實時產生的日志。
重要99.9%情況下,日志延遲不超過3分鐘。
彈性:您可按ALB實例級別開通或關閉訪問日志功能,可任意設置日志存儲周期。Logstore容量可動態伸縮滿足業務增長需求。
智能:基于達摩院智能AIOps算法,提供ALB指標自動巡檢功能,有助于更快、更準確地發現并定位問題。
資產說明
所有資產都在您選擇的Project下,Project內的資產如下:
Logstore
訪問日志Logstore用于存儲ALB 7層訪問日志,該Logstore為您自定義創建的Logstore。
巡檢結果Logstore用于存儲巡檢結果。開啟數據采集功能后,自動生成該專屬Logstore,其名稱為訪問日志Logstore名稱-metrics-result。
重要請勿刪除ALB 7層訪問日志相關的Logstore,否則將無法正常采集日志到日志服務。
請勿刪除訪問日志Logstore中的部分字段的索引,否則指標轉換會失敗。
Metricstore
監控指標Metricstore用于存儲聚合后的指標信息。開啟數據采集功能后,自動生成該專屬Metricstore,其名稱為訪問日志Logstore名稱-metrics。
說明監控指標Metricstore存儲的是聚合后的指標,數據量相比原始訪問日志大大降低,非常適用于長期存儲。
聚合規則
規則名稱
聚合時間粒度
聚合維度
生成指標名
total
10秒
total
pv
body_bytes_sent_avg
body_bytes_sent_sum
request_length_avg
request_length_sum
upstream_response_time_avg
upstream_response_time_p50
upstream_response_time_p90
upstream_response_time_p99
request_time_avg
request_time_p50
request_time_p90
request_time_p99
app_lb_id
10秒
app_lb_id
pv:app_lb_id
body_bytes_sent_avg:app_lb_id
body_bytes_sent_sum:app_lb_id
request_length_avg:app_lb_id
request_length_sum:app_lb_id
upstream_response_time_avg:app_lb_id
upstream_response_time_p50:app_lb_id
upstream_response_time_p90:app_lb_id
upstream_response_time_p99:app_lb_id
request_time_avg:app_lb_id
request_time_p50:app_lb_id
request_time_p90:app_lb_id
request_time_p99:app_lb_id
app_lb_id_host_status
10秒
app_lb_id+host+status
pv:app_lb_id:host:status
body_bytes_sent_avg:app_lb_id:host:status
body_bytes_sent_sum:app_lb_id:host:status
request_length_avg:app_lb_id:host:status
request_length_sum:app_lb_id:host:status
upstream_response_time_avg:app_lb_id:host:status
upstream_response_time_p50:app_lb_id:host:status
upstream_response_time_p90:app_lb_id:host:status
upstream_response_time_p99:app_lb_id:host:status
request_time_avg:app_lb_id:host:status
request_time_p50:app_lb_id:host:status
request_time_p90:app_lb_id:host:status
request_time_p99:app_lb_id:host:status
巡檢規則
規則名稱
巡檢算法
巡檢指標
alb-patrol-total
Time2Graph
pv
body_bytes_sent_avg
body_bytes_sent_sum
request_length_avg
request_length_sum
upstream_response_time_avg
upstream_response_time_p50
upstream_response_time_p90
upstream_response_time_p99
request_time_avg
request_time_p50
request_time_p90
request_time_p99
alb-patrol-alb
Time2Graph
pv:alb
body_bytes_sent_avg:alb
body_bytes_sent_sum:alb
request_length_avg:alb
request_length_sum:alb
upstream_response_time_avg:alb
upstream_response_time_p50:alb
upstream_response_time_p90:alb
upstream_response_time_p99:alb
request_time_avg:alb
request_time_p50:alb
request_time_p90:alb
request_time_p99:alb
專屬儀表盤
儀表盤名稱
關聯的Logstore或Metricstore
說明
監控概覽
訪問日志Logstore名稱-metrics
展示ALB實例監控指標的總體情況,包括核心指標、錯誤碼、流量、異常事件、訪問PV、訪問成功率、平均延遲等指標。
監控中心
訪問日志Logstore名稱-metrics
訪問日志Logstore名稱
展示ALB實例的實時監控數據,包括訪問PV、請求成功率、平均延時、4xx請求數、Status分布、流量、P50延遲、P90延遲、P99延遲、TOP請求Host、TOP延遲Host、TOP失敗率Host、TOP請求URL、TOP延遲URL、TOP失敗率URL、TOP請求后端、TOP延遲后端、TOP失敗率后端等指標。
秒級監控
訪問日志Logstore名稱
以秒級粒度展示監控信息,便于發現瞬時抖動的異常情況,包括QPS、訪問延遲、Upstream延遲、成功率、請求流量、返回Body流量、2xx狀態碼、3xx狀態碼、錯誤狀態碼、Upstream2xx狀態碼、Upstream3xx狀態碼、Upstream錯誤狀態碼等。
實例巡檢
訪問日志Logstore名稱-metrics
訪問日志Logstore名稱-metrics-result
基于日志服務提供的機器學習算法,自動檢測ALB實例的異常點,包括異常總數、高等級異常、異常等級分布、中等級異常、低等級異常、異常指標分布、異常列表、異常事件等指標。
訪問概覽
訪問日志Logstore名稱
展示ALB實例的整體狀態,包括PV對比昨日、PV對比上周、UV對比昨日、UV對比上周、PV分布、UV分布、今日訪問PV、7天訪問PV、TOP10訪問省份、移動端占比、TOP10訪問Host、TOP10訪問UserAgent、TOP訪問IP等指標。
費用說明
阿里云負載均衡不針對日志管理功能收取額外費用。
接入ALB訪問日志后,日志服務將根據存儲空間、讀取流量、請求數量、數據加工、數據投遞等進行收費。更多信息,請參見按使用功能計費模式計費項。
使用限制
日志服務Project與負載均衡實例需處于同一地域。
目前,CloudLens for ALB支持如下地域。
云類型
地域
公共云
華北1(青島)、華北2(北京)、華北3(張家口)、華北6(烏蘭察布)、華東1(杭州)、華東2(上海)、華東5(南京-本地地域)、華南1(深圳)、華南3(廣州)、西南1(成都)、中國(香港)、新加坡、馬來西亞(吉隆坡)、印度尼西亞(雅加達)、日本(東京)、美國(硅谷)、美國(弗吉尼亞)、德國(法蘭克福)
金融云
華東1 金融云、華東2 金融云、華南1 金融云
注意事項
CloudLens功能要求云賬號下必須存在至少一個Project。
在用戶開通和使用CloudLens功能時,日志服務會檢測賬號下是否存在Project,具體邏輯如下。
檢測邏輯
用戶第一次開通CloudLens功能,日志服務會自動檢測您當前的阿里云賬號下是否存在任意Project,如果沒有Project,則會在華南2(河源)地域創建一個名稱為
aliyun-product-data-阿里云賬號ID-cn-heyuan
的Project。用戶開通CloudLens功能后進入CloudLens,日志服務只會自動檢測您當前的阿里云賬號下是否存在任意Project,不會在華南2(河源)地域創建Project,用戶可以手動創建任意Project,創建Project的步驟請參見管理Project。
刪除Project
如果您要刪除
aliyun-product-data-阿里云賬號ID-cn-heyuan
這個Project,可以打開云命令行,執行以下命令進行刪除,請根據實際情況替換阿里云賬號ID。aliyunlog log delete_project --project_name=aliyun-product-data-阿里云賬號ID-cn-heyuan --region-endpoint=cn-heyuan.log.aliyuncs.com
刪除其他Project和Logstore的步驟,請參見管理Logstore和管理Project。