Flume部署和使用

Flume部署和使用 官方文档: http://flume.apache.org/ example: WebServer –> Agent[Source–>Channel–>Sink] –> HDFS 一.简介 Flume是一个分布式,可靠的的框架,它能从许多不同的数据源高效地收集、聚合和移动大量日志数据到一个集中的目的进行存储。Flume OG主要是0.9及以前的版本,Flume NG主要是1.X的版本。类似的框架还有Logstash。对应广义的Hadoop而言,Flume是比较常用的。Logstash更轻量级,主要配合ELK使用 我们使用Flume,真要需要开发的代码不多,从使用层面来讲就