HDFSWriter写入失败的文件残留问题

Open Song621 opened this issue 3 years ago • 1 comments

HDFSWriter发生网络中断等情况造成无法与HDFS建立连接，需要手动删除已经写入的文件和临时目录。有什么方法可以对源码进行修改，使其自动删除写入失败时的残留文件。

Aug 26 '22 06:08 Song621

发现了同样的问题，当写入失败会在hdfs产生临时文件，程序没有删掉临时文件就将任务停止了

Mar 28 '23 01:03 liu-hai