日本熟妇hd丰满老熟妇,中文字幕一区二区三区在线不卡 ,亚洲成片在线观看,免费女同在线一区二区

Dataphin支持的數據源

在使用Dataphin前,您需要選擇符合業務場景需求的數據庫或數據倉庫作為數據源,用于讀取原始數據和寫入數據建設過程中的數據。Dataphin集成了豐富的數據引擎,支持接入MaxCompute、Hive等數據倉庫,也支持對接企業傳統數據庫,如MySQL、Oracle等。

背景信息

Dataphin支持對接的數據源包括大數據存儲型數據源、文件數據源、消息隊列數據源、關系型數據源和NoSQL數據源,各模塊支持對接的數據源類型說明如下:

  • 如果您需要在Dataphin中連接某數據源,則需要先在數據源管理中創建該數據源。

  • Dataphin添加數據源時支持添加生產數據源和開發數據源。Basic項目及Dev-Prod項目的Prod環境,讀寫生產數據源;Dev-Prod項目的Dev環境,讀寫開發數據源。數據服務中Basic模式和Dev-Prod模式的Prod環境讀取生產數據源,Dev-Prod模式的Dev環境讀取開發數據源。同步任務不支持生產開發雙環境,產品中的數據源讀寫的都是生產數據源。

    說明

    在內置的數據源類型中,未有所需接入的數據源類型時,您可自定義離線或實時數據源類型,并將自定義的數據源對接到Dataphin,以滿足不同的數據源接入需求。具體操作,請參見:

數據源說明

應用場景

描述

相關文檔

離線集成

離線集成支持多種組件,包括輸入、輸出與轉換組件等,通過在畫布上簡單的拖拽、配置并組裝的方式,生成離線集成單條管道。離線集成也支持腳本模式,支持更多個性化配置。同時,用戶創建的自定義RDBMS數據源的輸入與輸出組件也會自動在創建在組件庫中,滿足多樣化的數據同步需求。

離線集成概述

離線研發

數據源接入Dataphin中后,支持在Dataphin創建數據庫SQL任務進行開發。

創建數據庫SQL任務

實時研發

接入的數據源支持用于創建實時元表創建與實時任務的開發。

Flink_SQL任務開發方式

全域質量

全域質量即資產質量,是基于Dataphin平臺,為數據的開發及使用提供全套的數據質量解決方案。數據質量的功能包括質量規則配置、質量監控、調度配置、智能報警、校驗治理等。

資產質量概述

數據服務

數據服務(OneService)是基于Dataphin建設數據中臺的最后一步。數據服務作為統一的數據服務出口,實現了數據的統一市場化管理,有效地降低數據開放門檻的同時,保障了數據開放的安全。

數據服務概述

標簽工廠

標簽工廠是通過標簽創建到服務全鏈路的構建,為企業數據研發團隊以及開發工程師提供一站式標簽開發以及服務平臺,適合多種場景(如風控、營銷),提供離線、實時、服務標簽的開發、管理、探索以及服務能力,賦能上層各端業務應用,為企業沉淀標簽資產,使標簽開發高效、好找、好用、好管理。

標簽工廠概述

本文僅列舉了支持接入Dataphin的數據源及在Dataphin中支持的應用場景。若需要查看數據源在各場景中具體支持的功能詳情,請參見:

大數據存儲型數據源

數據源類型

離線集成

實時集成

離線研發

元數據采集

實時研發

全域質量

隱私計算

數據服務

標簽工廠

創建指導

MaxCompute

支持

支持

不支持

不支持

支持

支持

支持

不支持

支持

創建MaxCompute數據源

Hologres

支持

不支持

不支持

不支持

支持

支持

支持

支持

支持

創建Hologres數據源

Impala

支持

不支持

不支持

不支持

不支持

不支持

不支持

支持

不支持

創建IMPALA數據源

StarRocks

支持

不支持

不支持

不支持

支持

不支持

不支持

支持

不支持

創建StarRocks數據源

Hudi

支持

不支持

不支持

不支持

支持

不支持

不支持

不支持

不支持

創建Hudi數據源

Doris

支持

不支持

不支持

不支持

支持

不支持

不支持

不支持

不支持

新建Doris數據源

GreenPlum

支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

支持

創建Greenplum數據源

SelectDB

支持

不支持

不支持

不支持

不支持

不支持

不支持

支持

不支持

新建SelectDB數據源

文件數據源

數據源類型

離線集成

實時集成

離線研發

元數據采集

實時研發

全域質量

隱私計算

數據服務

標簽工廠

創建指導

FTP

支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

創建FTP數據源

OSS

支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

創建OSS數據源

Amazon S3

支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

新建Amazon S3數據源

消息隊列數據源

數據源類型

離線集成

實時集成

離線研發

元數據采集

實時研發

全域質量

隱私計算

數據服務

標簽工廠

創建指導

Log Service

支持

不支持

不支持

不支持

支持

不支持

不支持

不支持

不支持

創建Log Service數據源

Kafka

支持

支持

不支持

不支持

支持

不支持

不支持

不支持

支持

創建Kafka數據源

RocketMQ

不支持

不支持

不支持

不支持

支持

不支持

不支持

不支持

不支持

創建RocketMQ數據源

DataHub

支持

支持

不支持

不支持

支持

不支持

不支持

不支持

支持

創建DataHub數據源

關系型數據源

數據源類型

離線集成

實時集成

離線研發

元數據采集

實時研發

全域質量

隱私計算

數據服務

標簽工廠

創建指導

PolarDB

支持

不支持

不支持

不支持

支持

不支持

不支持

不支持

不支持

創建PolarDB數據源

PolarDB-X(原DRDS)

支持

不支持

不支持

不支持

支持

不支持

不支持

不支持

不支持

創建PolarDB-X數據源

MySQL

支持

支持

支持

支持

支持

支持

支持

支持

支持

創建MySQL數據源

SAP HANA

支持

不支持

不支持

不支持

支持

支持

不支持

支持

不支持

創建SAP HANA數據源

Microsoft SQL Server

支持

支持

不支持

支持

支持

支持

不支持

支持

不支持

創建Microsoft SQL Server數據源

PostgreSQL

支持

支持

不支持

支持

支持

支持

支持

支持

支持

創建PostgreSQL數據源

AnalyticDB for MySQL 2.0

支持

不支持

不支持

不支持

支持

不支持

不支持

支持

不支持

創建AnalyticDB for MySQL 2.0數據源

AnalyticDB for MySQL 3.0

支持

不支持

不支持

不支持

支持

不支持

不支持

支持

不支持

新建AnalyticDB for MySQL 3.0數據源

AnalyticDB for PostgreSQL

支持

不支持

支持

不支持

支持

支持

不支持

支持

支持

創建AnalyticDB for PostgreSQL數據源

OceanBase

支持

不支持

不支持

不支持

支持

不支持

不支持

不支持

不支持

創建OceanBase數據源

Oracle

支持

支持

支持

支持

支持

支持

不支持

支持

支持

創建Oracle數據源

Vertica

支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

創建Vertica數據源

IBM DB2

支持

支持

不支持

不支持

不支持

支持

不支持

不支持

不支持

創建IBM DB2數據源

Teradata

支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

創建Teradata數據源

ClickHouse

支持

支持

不支持

不支持

支持

支持

不支持

支持

不支持

創建ClickHouse數據源

DM(達夢)

支持

不支持

不支持

不支持

不支持

支持

不支持

支持

不支持

創建達夢(DM)數據源

GBase 8a

支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

創建GBase 8a數據源

KingbaseES

支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

創建KingbaseES數據源

TiDB

支持

不支持

不支持

不支持

支持

不支持

不支持

不支持

不支持

創建TiDB數據源

GoldenDB

支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

創建GoldenDB數據源

OpenGauss

支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

支持

創建openGauss數據源

NoSQL數據源

數據源類型

離線集成

實時集成

離線研發

元數據采集

實時研發

全域質量

隱私計算

數據服務

標簽工廠

創建指導

Elasticsearch

支持

不支持

不支持

不支持

支持

不支持

不支持

支持

支持

創建Elasticsearch數據源

MongoDB

支持

不支持

不支持

不支持

支持

不支持

不支持

支持

不支持

創建MongoDB數據源

Tablestore

支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

支持

創建Tablestore數據源

Aliyun HBase

不支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

創建Aliyun HBase數據源

Redis

支持

不支持

不支持

不支持

支持

不支持

不支持

不支持

不支持

創建Redis數據源

Lindorm(寬表引擎)

不支持

不支持

不支持

不支持

不支持

不支持

不支持

支持

支持

創建Lindorm數據源

半結構化存儲數據源

數據源類型

離線集成

實時集成

離線研發

元數據采集

實時研發

全域質量

隱私計算

數據服務

標簽工廠

創建指導

API

支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

支持

創建API數據源

SAP Table

支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

不支持

創建Sap Table數據源