日本熟妇hd丰满老熟妇,中文字幕一区二区三区在线不卡 ,亚洲成片在线观看,免费女同在线一区二区

首頁 日志服務(wù) 操作指南 數(shù)據(jù)處理

數(shù)據(jù)處理

更新時(shí)間: 2024-12-17 18:13:46

如果您需要在日志數(shù)據(jù)寫入Logstore前對(duì)數(shù)據(jù)進(jìn)行處理,例如數(shù)據(jù)過濾、字段提取、字段擴(kuò)展、數(shù)據(jù)脫敏,可以使用寫入處理器(IngestProcessor)。

工作原理

image

使用場(chǎng)景

  • 字段提?。簭脑既罩咀侄沃型ㄟ^正則表達(dá)式、Key-Value格式、JSON等解析方式提取出新的字段。

  • 擴(kuò)展字段:為原始日志添加新的字段。

  • 丟棄字段:刪除原始日志的部分字段。

  • 數(shù)據(jù)脫敏:將原始日志的敏感信息進(jìn)行脫敏處理。

  • 數(shù)據(jù)過濾:丟棄原始日志的部分?jǐn)?shù)據(jù)。

使用限制

功能計(jì)費(fèi)

寫入處理器是按照數(shù)據(jù)處理過程中消耗的計(jì)算資源量進(jìn)行計(jì)費(fèi),計(jì)費(fèi)單位為OCU。

可觀測(cè)資源額度OCU(Observability Capacity Unit)是阿里云云原生可觀測(cè)推出的新版計(jì)費(fèi)單位,可根據(jù)每小時(shí)資源使用情況自動(dòng)統(tǒng)計(jì)OCU用量,中國(guó)站公共云OCU的定價(jià)為0.15元/個(gè)。

日志服務(wù)計(jì)算型功能收費(fèi)計(jì)劃逐步通過OCU進(jìn)行計(jì)量,以用戶實(shí)際消耗的計(jì)算資源作為計(jì)量的度量維度。一個(gè)OCU的性能約等于0.5 Core CPU、2 GB內(nèi)存、3000 IOPS,在計(jì)算OCU的總數(shù)時(shí),會(huì)按照消耗的CPU核心數(shù)、內(nèi)存大小和IOPS三個(gè)維度分別計(jì)算三個(gè)OCU數(shù)量,然后取三個(gè)OCU數(shù)量的最大值作為OCU的最終值,用于計(jì)費(fèi)。

假設(shè)您的計(jì)算作業(yè)消耗了1 Core CPU,2GB內(nèi)存,3000 IOPS,則這個(gè)作業(yè)消耗2個(gè)OCU。在一個(gè)計(jì)量周期(1小時(shí))內(nèi),計(jì)算平均消耗的OCU可參考:數(shù)據(jù)寫入處理器處理1GB數(shù)據(jù),大約消耗1/3個(gè)OCU。數(shù)據(jù)加工(新版)處理1GB數(shù)據(jù),大約消耗1/3個(gè)OCU。規(guī)則消費(fèi)處理1GB數(shù)據(jù),約消耗0.3個(gè)OCU。

OCU的計(jì)費(fèi)信息,請(qǐng)參見按寫入數(shù)據(jù)量計(jì)費(fèi)模式計(jì)費(fèi)項(xiàng)按使用功能計(jì)費(fèi)模式計(jì)費(fèi)項(xiàng)

上一篇: 如何解決查詢分析與流處理兩種場(chǎng)景下的數(shù)據(jù)口徑差異 下一篇: 快速入門
阿里云首頁 日志服務(wù) 相關(guān)技術(shù)圈