flume to cos 源码

flume to cos 使用指南 以下分为flume独立部署与依赖hadoop环境部署介绍: 独立使用flume作agent时 首先将对应hadoop依赖版本的和以及定制的flume-hdfs-sink-1.8.0和fastjson的jar包放到flume的lib目录下,保证hadoop-cos能够正确的加载到FLUME_CLASSPATH中; 将hadoop相关的依赖放到flume的lib目录下,保证flume能够正确加载到hadoop的相关依赖; 由于flume sink cos所依赖的COSN文件系统为Hadoop兼容的文件系统,因此可以通过定义HdfsSink来将管道流Sink到COSN中,这里只需要修改hdfs的sink选项即可: ... # 在${agentName}.sinks.${sink}.hdfs.haconfigs选项中 ${agentName}.sinks.${s