阅读背景:

logstash将Kafka中的日志数据订阅到HDFS

来源:互联网 

前言:通常情形下,我们将Kafka的日志数据通过logstash定阅输出到ES,然后用Kibana来做可视化剖析,这就是我们通常常使用的ELK日志剖析模式。但是基于ELK的日志剖析,通常比拟常常使用的是实时剖析,日志存个十天半个月都会删掉。那末在一些情形下,我须要将日志数据也存一份到我HDFS,积聚到比拟久的时光做半年、一年乃至更长时光的大数据剖析。下面就来讲如何最简略的通过logstash将kafka中的数据定阅一份到hdfs。:通常情形下,我们将Kafka的日志数据通过logstash定阅输出到ES,然后用Kibana来




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: