datax同步mysql到doris，数据量多了一千多万

Open ZaneZ7 opened this issue 3 years ago • 7 comments

原表只有2600w多数据，抽取结束显示这么多。另外两个表倒是正常。 json配置没什么特别的，就是用了原表的id作为splitPk，配置了table,reader的column为*,数据库写在了jdbcUrl中。channel配置了4个，限速为-1。

Oct 20 '22 10:10 ZaneZ7

用的是主干版本自行编译的DataX吗？

Oct 22 '22 00:10 dingxiaobo

用的是主干版本自行编译的DataX吗？

没有自己编译，用的这个，看日期也挺新的。 zh

Oct 24 '22 04:10 ZaneZ7

你把splitPk参数去掉在跑一把看看. 还有你原表的id是自增主键或者数字类型吗,不能是字符串.

Dec 05 '22 00:12 Y-evil