log-pilot
log-pilot copied to clipboard
输入到kafka然后在通过logstash输出到文件日志顺序乱了
目前的架构是docker容器日志->kafka集群->logstash->本地硬盘。目前看到的现象是到本地硬盘的日志顺序就乱了。这个有什么好的解决方案不。
请教一下,我尝试利用示例进行测试Log-Pilot-filebeat输出到kafka,但是容器内部日志始终提示无法连接到代理,我在宿主机与容器内部进行ping与Telnet到达kafka:9092端口均是正常,能否贴出你的容器启动配置和环境,目前这个问题已经困扰我一天了,我的ELK是ECS,10.3.0.0的网段,而容器是172.17.0.8/16,我的kafka版本是2.3.0,我的启动配置:
docker run --rm -it
-v /var/run/docker.sock:/var/run/docker.sock
-v /etc/localtime:/etc/localtime
-v /:/host:ro
--cap-add SYS_ADMIN
-e PILOT_TYPE=filebeat
-e LOGGING_OUTPUT=kafka
-e KAFKA_BROKERS=10.3.3.40:9092,10.3.3.41:9092,10.3.3.42:9092
-e KAFKA_CLIENT_ID=log-pilot-docker
registry.cn-hangzhou.aliyuncs.com/acs/log-pilot:0.9.5-filebeat