功能集

功能

功能描述

參考文檔

XIHE引擎

XIHE MPP執(zhí)行模式

MPP計(jì)算過(guò)程采用pipeline流式計(jì)算，滿足低延遲的交互式分析場(chǎng)景。

-

XIHE BSP執(zhí)行模式

BSP采用批計(jì)算架構(gòu)，通過(guò)DAG進(jìn)行任務(wù)切分，分批調(diào)度。BSP支持計(jì)算數(shù)據(jù)落盤，適用于計(jì)算量大，吞吐高的復(fù)雜場(chǎng)景。

Spark引擎

Spark開發(fā)

完全兼容開源Spark，且AnalyticDB for MySQL Spark提供了更好的性能和更低的資源成本。

Spark運(yùn)維

完全兼容開源Spark，AnalyticDB for MySQL支持通過(guò)Spark UI查看作業(yè)運(yùn)行情況，同時(shí)也提供了基于Spark SQL和Spark應(yīng)用開發(fā)的智能診斷功能，提供優(yōu)化建議，提高運(yùn)維效率。

• 查看Spark應(yīng)用信息
• Spark應(yīng)用性能診斷

功能集

功能

功能描述

參考文檔

AnalyticDB for MySQL倉(cāng)存儲(chǔ)

玄武分析型存儲(chǔ)

玄武分析存儲(chǔ)引擎支持行列混存的存儲(chǔ)格式，提供了高可靠、高可用、高性能、低成本的企業(yè)級(jí)數(shù)據(jù)存儲(chǔ)能力，是AnalyticDB for MySQL實(shí)現(xiàn)高吞吐實(shí)時(shí)寫入、高性能實(shí)時(shí)查詢的基礎(chǔ)支撐。

AnalyticDB for MySQL數(shù)據(jù)湖存儲(chǔ)

Hudi存儲(chǔ)

OLTP數(shù)據(jù)源、日志數(shù)據(jù)源均可以通過(guò)AnalyticDB for MySQL導(dǎo)入至OSS并以Hudi格式存儲(chǔ)，導(dǎo)入后可使用XIHE或Spark引擎進(jìn)行后續(xù)分析。

功能集

功能

功能描述

參考文檔

大數(shù)據(jù)數(shù)據(jù)源

Maxcompute數(shù)據(jù)源

AnalyticDB for MySQL支持通過(guò)外表、DataWorks兩種方式將MaxCompute數(shù)據(jù)導(dǎo)入至數(shù)倉(cāng)版或湖倉(cāng)版集群，也支持通過(guò)外表將AnalyticDB for MySQL數(shù)倉(cāng)版集群中的數(shù)據(jù)導(dǎo)出至MaxCompute。

• MaxCompute數(shù)據(jù)導(dǎo)入
• 導(dǎo)出至MaxCompute

Hive數(shù)據(jù)源

AnalyticDB for MySQL支持通過(guò)數(shù)據(jù)遷移功能將Hive元數(shù)據(jù)和數(shù)據(jù)一鍵遷移至OSS。

HDFS數(shù)據(jù)源

AnalyticDB for MySQL支持通過(guò)外表、DataWorks兩種方式將HDFS數(shù)據(jù)導(dǎo)入至數(shù)倉(cāng)版或湖倉(cāng)版集群，也支持通過(guò)外表將AnalyticDB for MySQL數(shù)倉(cāng)版集群中的數(shù)據(jù)導(dǎo)出至HDFS。

• HDFS數(shù)據(jù)導(dǎo)入
• 導(dǎo)出至HDFS

Tablestore數(shù)據(jù)源

AnalyticDB for MySQL支持通過(guò)外表將Tablestore數(shù)據(jù)導(dǎo)入到湖倉(cāng)版。

OLTP數(shù)據(jù)源

RDS數(shù)據(jù)源

AnalyticDB for MySQL支持通過(guò)外表、Dataworks、DTS等方式將RDS MySQL、RDS SQL Server的數(shù)據(jù)導(dǎo)入數(shù)倉(cāng)版或湖倉(cāng)版，也支持通過(guò)外表將數(shù)倉(cāng)版集群的數(shù)據(jù)導(dǎo)出至RDS MySQL。

• RDS MySQL數(shù)據(jù)導(dǎo)入
• RDS SQL Server數(shù)據(jù)導(dǎo)入
• 導(dǎo)出至RDS MySQL

PolarDB數(shù)據(jù)源

AnalyticDB for MySQL支持通過(guò)DTS、Dataworks、聯(lián)邦分析等方式將PolarDB MySQL和PolarDB -X的數(shù)據(jù)導(dǎo)入至數(shù)倉(cāng)版和湖倉(cāng)版集群中。

• PolarDB MySQL數(shù)據(jù)導(dǎo)入
• PolarDB-X數(shù)據(jù)導(dǎo)入

自建MySQL數(shù)據(jù)源

AnalyticDB for MySQL支持通過(guò)外表將ECS自建MySQL數(shù)據(jù)庫(kù)中的數(shù)據(jù)導(dǎo)入至數(shù)倉(cāng)版集群，同時(shí)也支持將數(shù)倉(cāng)版集群中的數(shù)據(jù)導(dǎo)出至自建的MySQL數(shù)據(jù)庫(kù)。

• 自建MySQL數(shù)據(jù)導(dǎo)入
• 導(dǎo)出至自建MySQL

日志數(shù)據(jù)源

SLS數(shù)據(jù)源

AnalyticDB for MySQL支持通過(guò)Logstash插件、日志數(shù)據(jù)投遞功能將日志數(shù)據(jù)導(dǎo)入至數(shù)倉(cāng)版或湖倉(cāng)版集群。

• 日志數(shù)據(jù)導(dǎo)入
• 通過(guò)數(shù)據(jù)同步功能同步SLS至湖倉(cāng)版

Kafka數(shù)據(jù)源

AnalyticDB for MySQL支持通過(guò)Logstash插件、Dataworks和數(shù)據(jù)同步三種方法將Kafka數(shù)據(jù)導(dǎo)入到數(shù)倉(cāng)版或湖倉(cāng)版集群。

• Kafka
• 通過(guò)數(shù)據(jù)同步功能同步Kafka至湖倉(cāng)版

OSS數(shù)據(jù)源

AnalyticDB for MySQL支持通過(guò)外表、Dataworks和元數(shù)據(jù)發(fā)現(xiàn)三種方法將OSS中的數(shù)據(jù)導(dǎo)入至數(shù)倉(cāng)版或湖倉(cāng)版集群，也支持通過(guò)外表將數(shù)倉(cāng)版中的數(shù)據(jù)導(dǎo)出至OSS中。

• OSS數(shù)據(jù)導(dǎo)入
• 導(dǎo)出至OSS

功能集

功能

功能描述

參考文檔

數(shù)據(jù)開發(fā)/分析

SQL開發(fā)

AnalyticDB for MySQL支持通過(guò)DDL、DML、DQL和DCL進(jìn)行SQL開發(fā)。

• DDL語(yǔ)句
• DML操作
• DQL操作
• DCL操作

Spark作業(yè)開發(fā)

AnalyticDB for MySQL支持通過(guò)Spark SQL、Spark Jar、Notebook、Jupyter等進(jìn)行Spark開發(fā)。

• Spark開發(fā)編輯器
• Notebook開發(fā)編輯器
• Spark SQL開發(fā)
• Spark應(yīng)用開發(fā)

調(diào)度開發(fā)

AnalyticDB for MySQL支持通過(guò)DMS、Dataworks和第三方工具Airflow調(diào)度任務(wù)。

• DMS調(diào)度XIHE SQL
• DMS調(diào)度Spark
• DataWorks調(diào)度XIHE SQL
• Airflow調(diào)度Spark

數(shù)據(jù)可視化

BI可視化

AnalyticDB for MySQL支持QuickBI、DataV、FineBI、PowerBI、永洪BI、帆軟BI、Tableau等多類BI工具。

功能集

功能

功能描述

參考文檔

連接AnalyticDB for MySQL集群

MySQL命令行、業(yè)務(wù)系統(tǒng)、客戶端、BI工具

AnalyticDB for MySQL支持通過(guò)MySQL命令行、業(yè)務(wù)系統(tǒng)、客戶端、BI工具鏈接集群。

• MySQL命令行連接集群
• 業(yè)務(wù)系統(tǒng)連接集群
• 客戶端連接集群
• BI工具連接集群

集群管理

創(chuàng)建、變配和刪除集群

AnalyticDB for MySQL支持通過(guò)控制臺(tái)或調(diào)用API創(chuàng)建、變配、刪除集群。

• 創(chuàng)建和刪除集群
• 集群變配
• 數(shù)倉(cāng)版API
• 湖倉(cāng)版API

標(biāo)簽管理

當(dāng)AnalyticDB for MySQL集群的數(shù)量較多時(shí)，可以通過(guò)標(biāo)簽對(duì)集群進(jìn)行分類和篩選。

賬號(hào)管理

AnalyticDB for MySQL支持創(chuàng)建高權(quán)限賬號(hào)和普通賬號(hào)，高權(quán)限賬號(hào)可以管理所有普通賬號(hào)和數(shù)據(jù)庫(kù)；使用普通賬號(hào)進(jìn)行數(shù)據(jù)庫(kù)操作時(shí)，需要手動(dòng)創(chuàng)建普通賬號(hào)，并為普通賬號(hào)授權(quán)。

資源組管理

AnalyticDB for MySQL數(shù)倉(cāng)版和湖倉(cāng)版集群的資源組功能可以對(duì)計(jì)算資源進(jìn)行按需劃分，不同資源組間的計(jì)算資源在物理上完全隔離。通過(guò)為數(shù)據(jù)庫(kù)賬號(hào)綁定資源組，讓SQL查詢根據(jù)綁定關(guān)系路由至對(duì)應(yīng)的資源組執(zhí)行，以滿足集群內(nèi)部多租戶、混合負(fù)載的需求。

• 數(shù)倉(cāng)版資源組
• 湖倉(cāng)版資源組

資源彈性擴(kuò)容

AnalyticDB for MySQL支持通過(guò)資源彈性計(jì)劃實(shí)現(xiàn)計(jì)算資源和存儲(chǔ)資源分時(shí)彈性。創(chuàng)建資源彈性計(jì)劃后會(huì)在系統(tǒng)負(fù)載過(guò)高時(shí)自動(dòng)執(zhí)行擴(kuò)容操作，保障業(yè)務(wù)的穩(wěn)定性。

• 資源彈性計(jì)劃
• 數(shù)倉(cāng)版資源彈性計(jì)劃API
• 湖倉(cāng)版資源彈性計(jì)劃API

負(fù)載管理

AnalyticDB for MySQL支持配置工作負(fù)載管理規(guī)則，通過(guò)多個(gè)規(guī)則對(duì)不同負(fù)載進(jìn)行精細(xì)化控制，提高集群的整體運(yùn)行狀態(tài)。

運(yùn)維事件

AnalyticDB for MySQL支持通過(guò)控制臺(tái)或調(diào)用API管理運(yùn)維事件。

• 運(yùn)維管理
• 數(shù)倉(cāng)版運(yùn)維管理API
• 湖倉(cāng)版運(yùn)維管理API

監(jiān)控報(bào)警

監(jiān)控指標(biāo)展示

AnalyticDB for MySQL提供豐富的監(jiān)控指標(biāo)，且支持通過(guò)調(diào)用API或控制臺(tái)查看集群過(guò)去一個(gè)月內(nèi)指定時(shí)間段的各項(xiàng)監(jiān)控指標(biāo)，掌握集群的性能和運(yùn)行狀況.

• 查看監(jiān)控信息
• 數(shù)倉(cāng)版監(jiān)控管理API

報(bào)警事件設(shè)置

AnalyticDB for MySQL支持設(shè)置報(bào)警規(guī)則，系統(tǒng)在監(jiān)控?cái)?shù)據(jù)滿足條件時(shí)，會(huì)及時(shí)通知報(bào)警聯(lián)系人組中的所有聯(lián)系人，以便快速處理報(bào)警問(wèn)題。

備份恢復(fù)

周期性備份能力

AnalyticDB for MySQL集群創(chuàng)建后會(huì)自動(dòng)在后臺(tái)開啟數(shù)據(jù)備份功能，實(shí)現(xiàn)集群級(jí)別的數(shù)據(jù)備份。

克隆新集群

AnalyticDB for MySQL支持通過(guò)源集群的已有備份克隆新集群。

智能診斷

診斷與調(diào)優(yōu)

AnalyticDB for MySQL提供一鍵診斷、數(shù)據(jù)建模診斷、SQL Pattern、SQL診斷、庫(kù)表結(jié)構(gòu)優(yōu)化等能力。

功能集

功能

功能描述

參考文檔

權(quán)限管理

RAM權(quán)限管理

阿里云賬號(hào)授予RAM用戶一定的權(quán)限后，RAM用戶也可以在權(quán)限范圍內(nèi)創(chuàng)建和管理集群。例如登錄AnalyticDB for MySQL控制臺(tái)、創(chuàng)建或刪除集群、設(shè)置白名單等。

數(shù)據(jù)庫(kù)賬號(hào)權(quán)限管理

AnalyticDB for MySQL支持GLOBAL集群級(jí)別、DB數(shù)據(jù)庫(kù)級(jí)別、TABLE表級(jí)別、COLUMN列級(jí)別四個(gè)粒度的權(quán)限，針對(duì)不同的權(quán)限粒度應(yīng)授予不同的權(quán)限，以達(dá)到權(quán)限控制的目的。

連接管理

白名單設(shè)置

為保障AnalyticDB MySQL集群的安全穩(wěn)定，系統(tǒng)默認(rèn)禁止所有地址訪問(wèn)AnalyticDB for MySQL集群，在使用AnalyticDB for MySQL集群前，需為集群設(shè)置白名單，以允許外部設(shè)備訪問(wèn)該集群。

數(shù)據(jù)安全

云盤加密

云盤加密功能開啟后，系統(tǒng)會(huì)基于塊存儲(chǔ)對(duì)整個(gè)數(shù)據(jù)盤進(jìn)行加密，即使數(shù)據(jù)備份泄露也無(wú)法被解密，保護(hù)集群數(shù)據(jù)安全。

SQL審計(jì)

SQL審計(jì)功能可以實(shí)時(shí)記錄數(shù)據(jù)庫(kù)的DML和DDL操作信息，在SQL審計(jì)頁(yè)面可以查詢到執(zhí)行耗時(shí)長(zhǎng)等異常SQL，便于快速分析定位解決問(wèn)題。

網(wǎng)絡(luò)管理

切換vpc與交換機(jī)

當(dāng)AnalyticDB for MySQL集群和ECS實(shí)例不在同一專有網(wǎng)絡(luò)，又有內(nèi)網(wǎng)互通需求時(shí)，可以切換AnalyticDB for MySQL集群所屬的專有網(wǎng)絡(luò)。

功能集

功能

功能描述

參考文檔

湖倉(cāng)版

基礎(chǔ)資源

湖倉(cāng)版集群的基礎(chǔ)資源，包含計(jì)算預(yù)留資源和存儲(chǔ)預(yù)留資源，ACU為計(jì)費(fèi)單位。

彈性資源

湖倉(cāng)版集群在分時(shí)彈性和按需彈性場(chǎng)景中，會(huì)自動(dòng)擴(kuò)容彈性資源，會(huì)產(chǎn)生彈性資源的費(fèi)用，ACU為計(jì)費(fèi)單位。

存儲(chǔ)空間

集群使用過(guò)程中，存儲(chǔ)數(shù)據(jù)會(huì)占用一定的空間，包括熱數(shù)據(jù)存儲(chǔ)空間和冷數(shù)據(jù)存儲(chǔ)空間，并按照實(shí)際使用的空間按量計(jì)費(fèi)，您無(wú)需預(yù)分配存儲(chǔ)空間大小。

數(shù)倉(cāng)版

基礎(chǔ)資源

數(shù)倉(cāng)版集群的基礎(chǔ)資源指創(chuàng)建集群及擴(kuò)容時(shí)購(gòu)買的資源，包括計(jì)算資源與彈性IO資源，Core為計(jì)費(fèi)單位。

彈性資源

數(shù)倉(cāng)版集群的彈性資源指通過(guò)資源彈性計(jì)劃進(jìn)行彈性擴(kuò)容的計(jì)算資源與彈性IO資源。Core為計(jì)費(fèi)單位。

存儲(chǔ)空間

存儲(chǔ)空間費(fèi)用包含熱數(shù)據(jù)存儲(chǔ)費(fèi)用和冷數(shù)據(jù)存儲(chǔ)費(fèi)用。預(yù)留模式集群需提前指定存儲(chǔ)空間大小，彈性模式集群會(huì)按照實(shí)際使用的空間按量計(jì)費(fèi)。