準(zhǔn)備數(shù)據(jù)源和計(jì)算源
在使用Dataphin前,您需要選擇符合業(yè)務(wù)場(chǎng)景需求的數(shù)據(jù)庫或數(shù)據(jù)倉庫作為數(shù)據(jù)源,用于讀取原始數(shù)據(jù)和寫入數(shù)據(jù)建設(shè)過程中的數(shù)據(jù);同時(shí)您需要準(zhǔn)備MaxCompute項(xiàng)目、Flink項(xiàng)目作為Dataphin的計(jì)算源,為數(shù)據(jù)的研發(fā)提供計(jì)算資源。
準(zhǔn)備數(shù)據(jù)源
Dataphin支持對(duì)接的數(shù)據(jù)源包括大數(shù)據(jù)存儲(chǔ)型數(shù)據(jù)源、文件數(shù)據(jù)源、消息隊(duì)列數(shù)據(jù)源、關(guān)系型數(shù)據(jù)源和NoSQL數(shù)據(jù)源,各模塊支持對(duì)接的數(shù)據(jù)源類型及操作指導(dǎo),請(qǐng)參見Dataphin支持的數(shù)據(jù)源。
確定業(yè)務(wù)數(shù)據(jù)源類型后,在Dataphin創(chuàng)建對(duì)應(yīng)類型的數(shù)據(jù)源之前,您需確保數(shù)據(jù)源與Dataphin間網(wǎng)絡(luò)連通,以實(shí)現(xiàn)Dataphin讀取該數(shù)據(jù)源的原始數(shù)據(jù)及向該數(shù)據(jù)源寫入Dataphin加工后的數(shù)據(jù)。詳情請(qǐng)參見網(wǎng)絡(luò)連通解決方案。
準(zhǔn)備計(jì)算源
在創(chuàng)建項(xiàng)目空間前,您需要完成項(xiàng)目空間計(jì)算源的準(zhǔn)備。計(jì)算源包括離線計(jì)算源(MaxCompute)和實(shí)時(shí)計(jì)算源(Flink)。您可以根據(jù)業(yè)務(wù)情況進(jìn)行準(zhǔn)備對(duì)應(yīng)的計(jì)算源:
如何創(chuàng)建MaxCompute項(xiàng)目,請(qǐng)參見創(chuàng)建MaxCompute項(xiàng)目。
Dataphin支持為MaxCompute計(jì)算引擎的離線數(shù)倉添加加速計(jì)算源,以滿足對(duì)查詢速度有要求的業(yè)務(wù)場(chǎng)景。如果需要加速業(yè)務(wù)數(shù)據(jù)的查詢速度,則您需要完成Hologres的準(zhǔn)備。如何開通Hologres,請(qǐng)參見購買Hologres。
如何創(chuàng)建Flink項(xiàng)目,請(qǐng)參見Flink SQL作業(yè)快速入門。
重要當(dāng)前,Dataphin僅支持Blink獨(dú)享集群版的Flink作為Dataphin的計(jì)算源。
后續(xù)步驟
完成數(shù)據(jù)源和計(jì)算源準(zhǔn)備后,您就可以創(chuàng)建用于研發(fā)數(shù)據(jù)的項(xiàng)目空間。如何創(chuàng)建項(xiàng)目空間請(qǐng)參見創(chuàng)建項(xiàng)目空間。