log-pilot icon indicating copy to clipboard operation
log-pilot copied to clipboard

关于在kubernetes中日志收集的使用方法

Open lf1029698952 opened this issue 7 years ago • 2 comments

你好,请问一下, 1:有没有log-pilot在kubernetes的使用示例,各个环境变量配置的含义? 我在使用fluentd向kafka输出时,配置了这个KAFKA_DEFAULT_TOPIC环境变量还是不生效 2:收集容器内部的日志,该日志目录必须要使用emptyDir或hostpath挂载出来吗? 3:这个项目跟阿里云容器服务的logtail项目有什么区别吗,还是说该项目是logtail的开源版本。 还想问一下有没有该项目或阿里云日志服务的交流群,谢谢。

lf1029698952 avatar Nov 06 '18 03:11 lf1029698952

@lf1029698952

1:有没有log-pilot在kubernetes的使用示例,各个环境变量配置的含义?

https://github.com/AliyunContainerService/log-pilot/blob/master/docs/fluentd/docs.md,这里有关于环境变量配置的说明可参考下

我在使用fluentd向kafka输出时,配置了这个KAFKA_DEFAULT_TOPIC环境变量还是不生效

可以到log-pilot容器内的/etc/fluentd/fluentd.conf看下是否配置成功默认topic

2:收集容器内部的日志,该日志目录必须要使用emptyDir或hostpath挂载出来吗?

目前需要的

3:这个项目跟阿里云容器服务的logtail项目有什么区别吗,还是说该项目是logtail的开源版本。 还想问一下有没有该项目或阿里云日志服务的交流群,谢谢。

logtail只能采集到阿里云日志服务,Log-Pilot除此之外还支持对接多种开源主流的存储后端,如ES、Kafka、Redis等

chenquanzhao avatar Nov 07 '18 08:11 chenquanzhao

@lf1029698952

1:有没有log-pilot在kubernetes的使用示例,各个环境变量配置的含义?

https://github.com/AliyunContainerService/log-pilot/blob/master/docs/fluentd/docs.md,这里有关于环境变量配置的说明可参考下

我在使用fluentd向kafka输出时,配置了这个KAFKA_DEFAULT_TOPIC环境变量还是不生效

可以到log-pilot容器内的/etc/fluentd/fluentd.conf看下是否配置成功默认topic

2:收集容器内部的日志,该日志目录必须要使用emptyDir或hostpath挂载出来吗?

目前需要的

3:这个项目跟阿里云容器服务的logtail项目有什么区别吗,还是说该项目是logtail的开源版本。 还想问一下有没有该项目或阿里云日志服务的交流群,谢谢。

logtail只能采集到阿里云日志服务,Log-Pilot除此之外还支持对接多种开源主流的存储后端,如ES、Kafka、Redis等

filebeat 为什么不能指定 KAFKA_DEFAULT_TOPIC?

wajika avatar Jan 09 '19 07:01 wajika