1. 首页
  2. 数据库
  3. 其它
  4. Flume简单案例

Flume简单案例

上传者: 2021-01-09 07:12:23上传 PDF文件 47.1KB 热度 18次
采集目录到 HDFS **采集需求:**服务器的某特定目录下,会不断产生新的文件,每当有新文件出现,就需要把文件采集到 HDFS 中去 根据需求,首先定义以下 3 大要素  采集源,即 source——监控文件目录 : spooldir  下沉目标,即 sink——HDFS 文件系统: hdfs sink  source 和 sink 之间的传递通道——channel,可用 file channel 也可以用内存 channel 配置文件编写: # Name the components on this agent a1.sources = r1 a1.sinks = k1 a1.cha
下载地址
用户评论