核心概念的層次結(jié)構(gòu)
MaxCompute具有層次結(jié)構(gòu)，您可以通過了解其結(jié)構(gòu)，為后期項(xiàng)目規(guī)劃、安全管理等提供思路。本文為您介紹MaxCompute中核心概念的層次結(jié)構(gòu)及簡(jiǎn)要含義。
MaxCompute核心概念的層次結(jié)構(gòu)如下。
核心概念 | 說(shuō)明 |
Project（項(xiàng)目） | 項(xiàng)目是MaxCompute的基本組織單元，類似于傳統(tǒng)數(shù)據(jù)庫(kù)的Database或Schema的概念，是進(jìn)行多用戶隔離和訪問控制的主要邊界。更多項(xiàng)目信息，請(qǐng)參見項(xiàng)目。 |
Table（表） | 表是MaxCompute的數(shù)據(jù)存儲(chǔ)單元。更多表信息，請(qǐng)參見表。 |
Partition（分區(qū)） | 分區(qū)Partition是指一張表下，根據(jù)分區(qū)字段（一個(gè)或多個(gè)字段的組合）對(duì)數(shù)據(jù)存儲(chǔ)進(jìn)行劃分。如果表沒有分區(qū)，數(shù)據(jù)是直接放在表所在的目錄下。如果表有分區(qū)，每個(gè)分區(qū)對(duì)應(yīng)表下的一個(gè)目錄，數(shù)據(jù)是分別存儲(chǔ)在不同的分區(qū)目錄下。更多分區(qū)信息，請(qǐng)參見分區(qū)。 |
View（視圖） | 視圖是在表之上建立的虛擬表，它的結(jié)構(gòu)和內(nèi)容都來(lái)自表。一個(gè)視圖可以對(duì)應(yīng)一個(gè)表或多個(gè)表。如果您想保留查詢結(jié)果，但不想創(chuàng)建表占用存儲(chǔ)，可以通過視圖實(shí)現(xiàn)。更多視圖信息，請(qǐng)參見視圖操作。 |
User（用戶） | 用戶是MaxCompute安全功能中的概念，MaxCompute支持您通過阿里云賬號(hào)、RAM用戶或RAM角色訪問MaxCompute。非MaxCompute項(xiàng)目所有者（Project Owner）的用戶必須被加入MaxCompute項(xiàng)目中，且被授予相應(yīng)的權(quán)限，才能操作MaxCompute項(xiàng)目中的數(shù)據(jù)、作業(yè)、資源及函數(shù)。更多用戶管理信息，請(qǐng)參見用戶規(guī)劃與管理。 |
Role（角色） | 角色是MaxCompute安全功能中的概念，可以理解為擁有相同權(quán)限的用戶的集合。多個(gè)用戶可以同時(shí)存在于一個(gè)角色下，一個(gè)用戶也可以隸屬于多個(gè)角色。給角色授權(quán)后，該角色下的所有用戶擁有相同的權(quán)限。更多角色管理信息，請(qǐng)參見角色規(guī)劃。 |
Resource（資源） | 資源是MaxCompute中特有的概念。當(dāng)您使用MaxCompute的自定義函數(shù)（UDF）或MapReduce功能時(shí)，需要依賴資源來(lái)完成。更多資源信息，請(qǐng)參見資源。 |
Function（函數(shù)） | MaxCompute提供函數(shù)功能，包括內(nèi)建函數(shù)和UDF。更多函數(shù)信息，請(qǐng)參見函數(shù)。 |
Instance（實(shí)例） | 即實(shí)際運(yùn)行作業(yè)的一個(gè)具體實(shí)例，類同Hadoop中Job的概念。詳情請(qǐng)參見任務(wù)實(shí)例。 |
Quota（配額） | 配額是MaxCompute的計(jì)算資源池，提供作業(yè)運(yùn)行所需計(jì)算資源。更多配額信息，請(qǐng)參見配額。 |
Networklink（網(wǎng)絡(luò)連接） | 當(dāng)您使用外部表、UDF或湖倉(cāng)一體功能時(shí)，MaxCompute默認(rèn)未建立與外網(wǎng)或VPC網(wǎng)絡(luò)間的網(wǎng)絡(luò)連接，您需要開通網(wǎng)絡(luò)連接以訪問外網(wǎng)或VPC中的目標(biāo)服務(wù)（例如HBase、RDS、Hadoop等）。更多開通網(wǎng)絡(luò)連接信息，請(qǐng)參見網(wǎng)絡(luò)開通流程。 |
Schema | MaxCompute支持Schema，在Project之下對(duì)Table、Resource、Function進(jìn)行歸類。更多Schema信息，請(qǐng)參見Schema操作。 |
通常MaxCompute的各層級(jí)概念的組織模式如下：
租戶代表組織，以企業(yè)為例，一個(gè)企業(yè)可以在不同地域開通MaxCompute按量付費(fèi)服務(wù)或預(yù)先購(gòu)買包年包月計(jì)算資源（Quota）。
企業(yè)內(nèi)的各個(gè)部門在開通服務(wù)的地域內(nèi)創(chuàng)建和管理自己的項(xiàng)目（Project），用于存儲(chǔ)該部門的數(shù)據(jù)。項(xiàng)目?jī)?nèi)可以存儲(chǔ)多種類型對(duì)象，例如表（Table）、資源（Resource）、函數(shù)（Function）和實(shí)例（Instance）等。如果您有需要，也可以通過創(chuàng)建Schema，在項(xiàng)目之下進(jìn)一步對(duì)上述對(duì)象進(jìn)行歸類，詳情請(qǐng)參見Schema操作。各部門可以在項(xiàng)目?jī)?nèi)通過用戶與角色的管控，對(duì)項(xiàng)目?jī)?nèi)的各類數(shù)據(jù)進(jìn)行權(quán)限控制。
項(xiàng)目產(chǎn)生的存儲(chǔ)費(fèi)用以項(xiàng)目粒度出賬。如果您使用按量付費(fèi)計(jì)算資源，則查詢費(fèi)用計(jì)入運(yùn)行查詢的項(xiàng)目。如果您使用包年包月計(jì)算資源，則不再另收查詢費(fèi)用。
組織模式示例如下圖所示：
在此示例中，某企業(yè)在上海地域開通了按量付費(fèi)服務(wù)（默認(rèn)后付費(fèi)Quota），并且購(gòu)買了包年包月規(guī)格計(jì)算資源（默認(rèn)預(yù)付費(fèi)Quota）。
部門A創(chuàng)建了項(xiàng)目A，項(xiàng)目A包含一個(gè)Schema1，Schema內(nèi)存儲(chǔ)了表1、表2、以及函數(shù)1，關(guān)聯(lián)了默認(rèn)預(yù)付費(fèi)Quota，部門A的用戶A被授予了項(xiàng)目A數(shù)據(jù)的訪問權(quán)限，并且可以發(fā)起作業(yè)，所有作業(yè)默認(rèn)使用的計(jì)算資源為默認(rèn)預(yù)付費(fèi)Quota。
部門B創(chuàng)建了項(xiàng)目B，項(xiàng)目B沒有開啟按Schema存儲(chǔ)，所以項(xiàng)目下直接存儲(chǔ)了表3、表4、視圖1和資源1，關(guān)聯(lián)了默認(rèn)后付費(fèi)Quota，部門B的用戶B被授予了項(xiàng)目B數(shù)據(jù)的訪問權(quán)限，并且可以發(fā)起作業(yè)，所有作業(yè)默認(rèn)使用的計(jì)算資源為默認(rèn)后付費(fèi)Quota。