在數(shù)據(jù)模型設(shè)計(jì)之前,您需要首先完成技術(shù)架構(gòu)的選型。本教程中使用阿里云大數(shù)據(jù)產(chǎn)品MaxCompute配合DataWorks,完成整體的數(shù)據(jù)建模和研發(fā)流程。
完整的技術(shù)架構(gòu)圖如下圖所示。其中,DataWorks的數(shù)據(jù)集成負(fù)責(zé)完成數(shù)據(jù)的采集和基本的ETL。MaxCompute作為整個(gè)大數(shù)據(jù)開發(fā)過程中的離線計(jì)算引擎。DataWorks則包括數(shù)據(jù)開發(fā)、數(shù)據(jù)質(zhì)量、數(shù)據(jù)安全、數(shù)據(jù)管理等在內(nèi)的一系列功能。