flume-ng-extends-source icon indicating copy to clipboard operation
flume-ng-extends-source copied to clipboard

SpoolDirectoryTailFileSource,某些文件收集topN行后,程序会halt住

Open duanyixuan opened this issue 7 years ago • 1 comments

@ningg : SpoolDirectoryTailFileSource组件已经开始在我们公司内部收集了多份日志,目前为止运行1年了,之前一切正常,感谢您的贡献。但是,最近,我们新增了一种新的日志文件,发现收集topN行后,程序会halt住。但日志滚动正常。例如:跨小时切割的文件,会在跨小时瞬间滚动到新的文件,而将上小时的文件标记为completed,然后,又收集topN后,程序再会halt住,cpu仍然在占用。但是,每次卡住的地方,日志格式没有异常,纠结中…… 段轶轩 16:19:30

duanyixuan avatar Jul 17 '17 08:07 duanyixuan

我也遇到了这个问题,但是我使用的版本是1.8版本,是否有不兼容的情况。

fuyun2024 avatar Jun 08 '18 07:06 fuyun2024