什么是云原生多模數(shù)據(jù)庫(kù)Lindorm
本文介紹云原生多模數(shù)據(jù)庫(kù) Lindorm的產(chǎn)品概要。
前置概念
閱讀本文前,您可能需要了解如下概念:
產(chǎn)品介紹
Lindorm是面向物聯(lián)網(wǎng)、互聯(lián)網(wǎng)、車聯(lián)網(wǎng)等設(shè)計(jì)和優(yōu)化的云原生多模超融合數(shù)據(jù)庫(kù),支持寬表、時(shí)序、文本、對(duì)象、流、空間等多種數(shù)據(jù)的統(tǒng)一訪問(wèn)和融合處理,并兼容SQL、HBase/Cassandra/S3、TSDB、HDFS、Solr、Kafka等多種標(biāo)準(zhǔn)接口和無(wú)縫集成三方生態(tài)工具,適用于日志、監(jiān)控、賬單、廣告、社交、出行、風(fēng)控等場(chǎng)景,Lindorm也是為阿里巴巴核心業(yè)務(wù)提供支撐的數(shù)據(jù)庫(kù)之一。
Lindorm基于存儲(chǔ)計(jì)算分離、多模共享融合的云原生架構(gòu),具備彈性、低成本、簡(jiǎn)單易用、開(kāi)放、穩(wěn)定等優(yōu)勢(shì),適合元數(shù)據(jù)、日志、賬單、標(biāo)簽、消息、報(bào)表、維表、結(jié)果表、Feed流、用戶畫像、設(shè)備數(shù)據(jù)、監(jiān)控?cái)?shù)據(jù)、傳感器數(shù)據(jù)、小文件、小圖片等數(shù)據(jù)的存儲(chǔ)和分析,其核心能力包括:
核心能力 | 說(shuō)明 |
多模超融合 | 支持寬表、時(shí)序、對(duì)象、文本、隊(duì)列、空間等多種數(shù)據(jù)模型,模型之間數(shù)據(jù)互融互通,具備數(shù)據(jù)接入、存儲(chǔ)、檢索、計(jì)算、分析等一體化融合處理與服務(wù)的能力,幫助應(yīng)用開(kāi)發(fā)更加敏捷、靈活、高效。 |
高性價(jià)比 | 支持千萬(wàn)級(jí)高并發(fā)吞吐、毫秒級(jí)訪問(wèn)延遲,并通過(guò)多級(jí)存儲(chǔ)介質(zhì)、智能冷熱分離、自適應(yīng)特征壓縮,大幅減少存儲(chǔ)成本。 |
云原生彈性 | 支持計(jì)算資源、存儲(chǔ)資源獨(dú)立彈性伸縮,并提供按需即時(shí)彈性、按使用量付費(fèi)的Serverless服務(wù)。 |
開(kāi)放兼容 | 兼容SQL、HBase/Cassandra/S3、TSDB、HDFS、Solr、Kafka等多種標(biāo)準(zhǔn)接口,支持與Hadoop、Spark、Flink、Kafka等系統(tǒng)無(wú)縫打通,并提供簡(jiǎn)單易用的數(shù)據(jù)交換、處理、訂閱等能力。 |
多模介紹
Lindorm支持寬表、時(shí)序、對(duì)象、文件、隊(duì)列、空間等多種數(shù)據(jù)模型,提供標(biāo)準(zhǔn)SQL和開(kāi)源接口兩種方式,模型之間數(shù)據(jù)互融互通,幫助應(yīng)用開(kāi)發(fā)更加敏捷、靈活、高效。多模型的核心能力主要由以下幾大數(shù)據(jù)引擎提供,包括:
數(shù)據(jù)引擎 | 核心能力 |
寬表引擎 | 負(fù)責(zé)寬表與對(duì)象數(shù)據(jù)的管理和服務(wù),具備全局二級(jí)索引、多維檢索、動(dòng)態(tài)列、TTL等能力,適用于元數(shù)據(jù)、訂單、賬單、畫像、社交、feed流、日志等場(chǎng)景,兼容SQL、HBase、Cassandra(CQL)、S3等標(biāo)準(zhǔn)接口。 支持千萬(wàn)級(jí)高并發(fā)吞吐,支持百PB級(jí)存儲(chǔ),吞吐性能是開(kāi)源HBase(Apache HBase)的3~7倍,P99時(shí)延為開(kāi)源HBase(Apache HBase)的1/10,平均故障恢復(fù)時(shí)間相比開(kāi)源HBase(Apache HBase)提升10倍,支持冷熱分離,壓縮率比開(kāi)源HBase(Apache HBase)提升一倍,綜合存儲(chǔ)成本為開(kāi)源HBase(Apache HBase)的1/2。 |
時(shí)序引擎 | 負(fù)責(zé)時(shí)序數(shù)據(jù)的管理和服務(wù),主要面向工業(yè)、IoT、監(jiān)控等領(lǐng)域的量測(cè)數(shù)據(jù)、監(jiān)控?cái)?shù)據(jù)以及設(shè)備運(yùn)行數(shù)據(jù)提供基于SQL的管理、寫入、查詢能力。針對(duì)時(shí)序數(shù)據(jù)設(shè)計(jì)的壓縮算法,壓縮率可達(dá)10:1。支持海量數(shù)據(jù)的多維查詢和聚合計(jì)算,同時(shí)也支持時(shí)序數(shù)據(jù)的預(yù)降采樣和持續(xù)查詢。 |
搜索引擎 | 負(fù)責(zé)多模數(shù)據(jù)的檢索分析加速,其基于列存、倒排等核心技術(shù),具備全文檢索、聚合計(jì)算、復(fù)雜多維查詢等能力,適用于日志、賬單、畫像等場(chǎng)景,兼容SQL、開(kāi)源Solr等標(biāo)準(zhǔn)接口。 |
計(jì)算引擎 | 計(jì)算引擎與Lindorm存儲(chǔ)引擎深度融合,基于云原生架構(gòu)提供的分布式計(jì)算服務(wù),資源歸屬于用戶,滿足用戶在數(shù)據(jù)生產(chǎn)、交互式分析、機(jī)器學(xué)習(xí)和圖計(jì)算等場(chǎng)景的計(jì)算需求,兼容開(kāi)源Spark標(biāo)準(zhǔn)接口。 |
向量引擎 | 云原生多模數(shù)據(jù)庫(kù) Lindorm向量引擎提供面向海量向量數(shù)據(jù)的存儲(chǔ)、索引和檢索服務(wù),支持多種索引算法和距離函數(shù),并支持豐富的融合檢索方式。向量引擎不僅可以為大模型RAG系統(tǒng)提供必需的全文-向量融合檢索能力,進(jìn)一步提升大模型回答準(zhǔn)確度,同時(shí)還適用于推薦、NLP服務(wù)、智能問(wèn)答等多種AI業(yè)務(wù)場(chǎng)景。 |
AI引擎 | 云原生多模數(shù)據(jù)庫(kù) Lindorm AI引擎資源歸屬于用戶,為用戶提供了一站式集成AI推理能力,支持通過(guò)Lindorm SQL靈活導(dǎo)入并部署預(yù)訓(xùn)練模型,對(duì)海量多模數(shù)據(jù)進(jìn)行智能分析和處理。 |