數據同步全量增量知識SQL和執行頻次不一樣，其他的都一樣

文章目錄

• • • • • 一、Oracle同步Mysql(全量)
        • • 1. 添加項目
          • 2. 添加數據源
          • 3. 添加任務
          • 4. 構建json
          • 5. 任務執行
          • 6. 查看日志
          • 7. 同步數量對比
        • 二、Mysql同步Oracle(全量)
        • • 2.1. 添加構建reader
          • 2.2. 添加構建writer
          • 2.3. 配置同步映射字段
          • 2.4. 構建json
          • 2.4. 選擇任務模板
          • 2.5. 完成任務構建
          • 2.6. 數據清理
          • 2.7. 任務名稱變更
          • 2.8. 任務執行一次
          • 2.9. 確定任務執行
          • 2.10. 查看執行日志
          • 2.11. 實時刷新日志
          • 2.12. 數據驗證

一、Oracle同步Mysql(全量)

1. 添加項目

test-project

2. 添加數據源

3. 添加任務

4. 構建json

{"job": {"setting": {"speed": {"channel": 3},"errorLimit": {"record": 0,"percentage": 0.02}},"content": [{"reader": {"name": "oraclereader","parameter": {"column": ["IDNO","COL1","COL2","COL3","DT","COL5","COL6","COL7","COL8","COL9","COL10"],"splitPk": "IDNO","connection": [{"jdbcUrl": ["jdbc:oracle:thin:@192.xxx.xx.xxx:1521:orcl"],"table": ["TEST.OTBS1"]}],"username": "username","password": "password"}},"writer": {"name": "mysqlwriter","parameter": {"column": ["IDNO","COL1","COL2","COL3","DT","COL5","COL6","COL7","COL8","COL9","COL10"],"connection": [{"jdbcUrl": "jdbc:mysql://127.0.0.1:3306/datax?autoReconnect=true&useUnicode=true&characterEncoding=utf8&zeroDateTimeBehavior=CONVERT_TO_NULL&useSSL=false&serverTimezone=CTT&nullCatalogMeansCurrent=true","table": ["otbs1"]}],"username": "root","password": "123456"}}}]} }

5. 任務執行

6. 查看日志

7. 同步數量對比

二、Mysql同步Oracle(全量)

2.1. 添加構建reader

2.2. 添加構建writer

2.3. 配置同步映射字段

2.4. 構建json

2.4. 選擇任務模板

2.5. 完成任務構建

2.6. 數據清理

清空oracle數據otbs1

2.7. 任務名稱變更

點擊修改任務名稱，默認是表名，datax-web未做配置可以二期開發，這是修改后的效果

2.8. 任務執行一次

2.9. 確定任務執行

2.10. 查看執行日志

2.11. 實時刷新日志

如果任務執行沒有完成，查看實時日志需要點擊刷新

2.12. 數據驗證

總結

以上是生活随笔為你收集整理的ETL异构数据源Datax_图形化数据同步_11的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。