DataX Web分布式數據同步工具
DataX Web是在DataX之上開發(fā)的分布式數據同步工具,提供簡單易用的操作界面,降低用戶使用DataX的學習成本,縮短任務配置時間,避免配置過程中出錯。用戶可通過頁面選擇數據源即可創(chuàng)建數據同步任務,RDBMS數據源可批量創(chuàng)建數據同步任務,支持實時查看數據同步進度及日志并提供終止同步功能,集成并二次開發(fā)xxl-job可根據時間、自增主鍵增量同步數據。
任務"執(zhí)行器"支持集群部署,支持執(zhí)行器多節(jié)點路由策略選擇,支持超時控制、失敗重試、失敗告警、任務依賴,執(zhí)行器CPU.內存.負載的監(jiān)控等等。后續(xù)還將提供更多的數據源支持、數據轉換UDF、表結構同步、數據同步血緣等更為復雜的業(yè)務場景。
Architecture diagram:
項目部分截圖
評論
圖片
表情
