首頁
大數(shù)據(jù)開發(fā)治理平臺 DataWorks
操作指南
數(shù)據(jù)集成
任務配置方式
DataStudio側實時同步
單表實時ETL組件
轉換
配置數(shù)據(jù)過濾轉換
數(shù)據(jù)過濾插件可以對數(shù)據(jù)進行規(guī)則過濾,例如過濾字段的大小等,符合規(guī)則的數(shù)據(jù)才會被保留。
前提條件
配置數(shù)據(jù)過濾節(jié)點前,您需要先配置好相應的輸入節(jié)點,詳情請參見實時同步支持的數(shù)據(jù)源。
操作步驟
進入數(shù)據(jù)開發(fā)頁面。
登錄DataWorks控制臺,切換至目標地域后,單擊左側導航欄的 ,在下拉框中選擇對應工作空間后單擊進入數(shù)據(jù)開發(fā)。
鼠標懸停至圖標,單擊 。
您也可以展開業(yè)務流程,右鍵單擊目標業(yè)務流程,選擇
。在新建節(jié)點對話框中,選擇同步方式為單表(Topic)到單表(Topic)ETL,輸入名稱,并選擇路徑。
單擊確認。
在實時同步節(jié)點的編輯頁面,鼠標單擊 并拖拽至編輯面板,連線已配置好的輸入節(jié)點。
單擊數(shù)據(jù)過濾節(jié)點,在節(jié)點配置對話框中,配置各項參數(shù)。
節(jié)點配置
規(guī)則:對數(shù)據(jù)源中的數(shù)據(jù)進行規(guī)則過濾,滿足規(guī)則的數(shù)據(jù)才會被保留。例如圖中是將
age
字段值大于18
的數(shù)據(jù)進行過濾保留。說明規(guī)則中最后的字段和自定義二選一填寫。
輸出字段
顯示要同步的原始表中對應字段和類型。
單擊工具欄中的圖標。
文檔內容是否對您有幫助?