阅读背景:

flume简介与监听文件目录并sink至hdfs实战

来源:互联网 

场景

1. flume是甚么

1.1 背景

  flume 作为 cloudera 开发的实光阴志搜集体系,遭到了业界的认可与普遍运用。Flume 初始的发行版本目前被统称为 Flume OG(original generation),属于 cloudera。但随着 FLume 功效的扩大,Flume OG 代码工程臃肿、核心组件设计不公道、核心配置不尺度等缺陷裸露出来,特别是在 Flume OG 的最后一个发行版本 0.94.0 中,日志传输不稳固的现象尤其严重,为懂得决这些问题,2011 年 10 月 22 号,cloudera 完成了 Flume-728,对 Flume 进行了里程碑式的修改:重构核心组件、核心配置和代码架构,重构后的版本统称为 Flume NG(next generation);修改的另外一缘由是将 Flume 纳入 apache 旗下,cloudera Flume 改名为 Apache Flume。   flume 作为 cloudera




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: