中文无码电影2020,岛国的少妇久久久久久久,亚州春色AV无码专区

云數據庫 SelectDB 版結合OSS對象存儲提供了內網高速導入功能，且單次導入數據量可達百GB級別。本文介紹如何通過OSS Load導入數據至云數據庫 SelectDB 版實例中。

前提條件

已獲取AccessKey信息。具體操作，請參見創建AccessKey。
已開通OSS服務，并創建與云數據庫 SelectDB 版實例位于相同地域的存儲空間（Bucket）。具體操作，請參見開通OSS服務和創建存儲空間。
請確保OSS存儲空間（Bucket）與云數據庫 SelectDB 版實例在同一地域，并使用阿里云VPC網絡訪問OSS。

導入語法?

LOAD LABEL load_label
(
    data_desc1[, data_desc2, ...]
)
WITH S3
(
    "AWS_PROVIDER" = "OSS",
    "AWS_REGION" = "REGION",  
    "AWS_ENDPOINT" = "ENDPOINT",
    "AWS_ACCESS_KEY" = "AccessKey ID",
    "AWS_SECRET_KEY"="AccessKey Secret"
)
PROPERTIES 
(
  "key1"="value1", ...
);

說明

云數據庫 SelectDB 版支持從所有兼容AWS S3協議的對象存儲系統中導入數據，因此導入語法中采用了AWS、S3等關鍵詞。

參數說明

data_desc1用于描述一組需要導入的文件，其完整定義如下。

[MERGE|APPEND|DELETE]
DATA INFILE
(
"file_path1"[, file_path2, ...]
)
[NEGATIVE]
INTO TABLE `table_name`
[PARTITION (p1, p2, ...)]
[COLUMNS TERMINATED BY "column_separator"]
[FORMAT AS "file_type"]
[(column_list)]
[COLUMNS FROM PATH AS (c1, c2, ...)]
[PRECEDING FILTER predicate]
[SET (column_mapping)]
[WHERE predicate]
[DELETE ON expr]
[ORDER BY source_sequence]
[PROPERTIES ("key1"="value1", ...)]

參數名稱	參數說明
`[MERGE\|APPEND\|DELETE]`	數據合并類型，默認為`APPEND`，表示本次導入是普通的追加寫操作`MERGE`和`DELETE`類型僅適用于Unique Key模型表。其中`MERGE`類型需要配合`[DELETE ON]`語句使用，以標注Delete Flag列。而`DELETE`類型則表示本次導入的所有數據皆為刪除數據。
`DATA INFILE`	指定需要導入的文件路徑。可以是多個，可以使用通配符。路徑最終必須匹配到文件，如果只匹配到目錄則導入會失敗。
`NEGTIVE`	本次導入為一批”負“導入。這種方式僅針對具有整型SUM聚合類型的聚合數據表。該方式會將導入數據中，SUM聚合列對應的整型數值取反。主要用于沖抵之前導入錯誤的數據。
`PARTITION(p1, p2, ...)`	指定僅導入表的某些分區，不在分區范圍內的數據將被忽略。
`COLUMNS TERMINATED BY`	指定列分隔符。僅在`CSV`格式下有效，僅支持單字節分隔符。
`FORMAT AS`	指定文件類型，支持`CSV`、`PARQUET`和`ORC`格式，默認為`CSV`。
`column list`	用于指定原始文件中的列順序。詳細信息，請參見數據轉換。
`COLUMNS FROM PATH AS`	指定從導入文件路徑中抽取的列。
`PRECEDING FILTER predicate`	前置過濾條件。數據首先根據`column list`和`COLUMNS FROM PATH AS`按順序拼接成原始數據行。然后按照前置過濾條件進行過濾。詳細信息，請參見數據轉換。
`SET (column_mapping)`	指定列的轉換函數。
`WHERE predicate`	根據條件對導入的數據進行過濾。詳細信息，請參見數據轉換。
`DELETE ON expr`	需配合`MEREGE`導入模式一起使用，僅針對Unique Key模型的表。用于指定導入數據中表示Delete Flag的列和計算關系。
`ORDER BY`	僅針對Unique Key模型的表。用于指定導入數據中表示Sequence Col的列。主要用于導入時保證數據順序。
`PROPERTIES ("key1"="value1", ...)`	指定導入的format的一些參數。如導入的文件是`JSON`格式，則可以在這里指定`json_root`、`jsonpaths`、`fuzzy_parse`等參數。

云存儲服務配置參數說明如下。

參數名稱	參數說明
`AWS_PROVIDER`	對象存儲的服務提供商，固定為OSS。
`AWS_REGION`	訪問OSS數據的地域。
`AWS_ENDPOINT`	訪問OSS數據的`Endpoint`。如何獲取，請參見訪問域名和數據中心。重要請確保OSS存儲空間（Bucket）與您的云數據庫 SelectDB 版實例在同一地域。
`AWS_ACCESS_KEY`	訪問OSS數據的`Accesskey ID`。
`AWS_SECRET_KEY`	訪問OSS數據的`AccessKey Secret`。

PROPERTIES的常用參數定義如下。

參數名稱	參數說明
`timeout`	導入超時時間，單位：秒，默認為`14400`，即4小時。
`max_filter_ratio`	最大容忍可過濾（數據不規范等原因）的數據比例。默認為`0`，即零容忍，取值范圍為0到1。
`exec_mem_limit`	導入內存限制，單位：Byte，默認為`2147483648`，即2 GiB。
`strict_mode`	是否對數據進行嚴格限制，默認為`false`。
`timezone`	指定某些受時區影響的函數的時區，如`strftime/alignment_timestamp/from_unixtime`等。詳細信息，請參見時區。默認為`"Asia/Shanghai"`時區。
`load_parallelism`	導入并發度，默認為`1`。調大導入并發度會啟動多個執行計劃同時執行導入任務，加快導入速度。
`send_batch_parallelism`	用于設置發送批處理數據的并行度，如果并行度的值超過BE配置中的`max_send_batch_parallelism_per_job`，那么作為協調點的BE將使用`max_send_batch_parallelism_per_job`的值。
`load_to_single_tablet`	是否只導入數據到對應分區的一個tablet，默認值為`false`。該參數只允許在對帶有random分區的Duplicate表導入數據的時候設置。

使用示例

創建待導入的SelectDB數據表，示例如下。

CREATE TABLE test_table
(
    id int,
    name varchar(50),
    age int,
    address varchar(50),
    url varchar(500)
)
DISTRIBUTED BY HASH(id) BUCKETS 4
PROPERTIES("replication_num" = "1");

創建待導入的文件test_file.txt，示例如下。

1,yang,32,shanghai,http://example.com
2,wang,22,beijing,http://example.com
3,xiao,23,shenzhen,http://example.com
4,jess,45,hangzhou,http://example.com
5,jack,14,shanghai,http://example.com
6,tomy,25,hangzhou,http://example.com
7,lucy,45,shanghai,http://example.com
8,tengyin,26,shanghai,http://example.com
9,wangli,27,shenzhen,http://example.com
10,xiaohua,37,shanghai,http://example.com

通過以下方式進行OSS Load，示例如下。

LOAD LABEL test_db.test_label_1
(
    DATA INFILE("s3://your_bucket_name/test_file.txt")
    INTO TABLE test_table
    COLUMNS TERMINATED BY ","
)
WITH S3
(
    "AWS_PROVIDER" = "OSS",
    "AWS_REGION" = "oss-cn-beijing",  
    "AWS_ENDPOINT" = "oss-cn-beijing-internal.aliyuncs.com",
    "AWS_ACCESS_KEY" = "<your_access_key>",
    "AWS_SECRET_KEY"="<your_secret_key>"
)
PROPERTIES
(
    "timeout" = "3600"
);

說明

對象存儲的路徑固定以“s3://”開頭。

日本熟妇hd丰满老熟妇,中文字幕一区二区三区在线不卡 ,亚洲成片在线观看,免费女同在线一区二区

前提條件

導入語法?

參數說明

使用示例