小米粥
小米粥
mysql数据量有200W左右，偶尔丢失
> 这里统计的是单个Task的读取数量,确切的说是参数querySql查询出来的数量,不是Job的. > > 当你的Job只有1个Task的时候,才会一致. > > 读取的总量在任务执行结束后不是有统计吗,用那个就行. 只有一个Task，并且我增加的nums变量跟任务执行结束后统计的总量是一致的，问题就在于总量跟querySql的数据量对不上了，偶尔会出现遗漏几条的情况
> 问题有得到解决吗，我这里也是MySQL 到 HDFS 时丢失了数据 大佬，问题有解决吗？我也遇到了一样的问题
> 问题有得到解决吗，我这里也是MySQL 到 HDFS 时丢失了数据 @sweatke 大佬有解决吗？
> 遇到这个问题+1，一模一样。请问楼主有查到问题或者解决了吗？ > > 我们发现问题的实例是自建5.6实例。切换到阿里云5.6实例后无此情况发生。 @OMG-By 除了切换到阿里云5.6实例，有其他方法吗？请问有找到真正的原因吗？