flume其实就是通过配置文件来实现不同的功能
1、安装配置:
(1)首先从https://archive.apache.org/dist/flume/下载需要的版本,如下图所示:
(2)使用tar -xzvf apache-flume-1.9.0-bin.tar.gz解压,如下图所示:
(3)配置环境变量,将以下信息加入到/etc/profile文件中,如:
export FLUME_HOME=/usr/local/src/apache-flume-1.9.0-bin
export PATH=$FLUME_HOME/bin:$PATH
如下图所示:
(4)然后执行source /etc/profile使之生效,如下图所示:
(5)然后执行flume-ng version查看版本,如下图所示:
(6)此时会提示:错误: 找不到或无法加载主类 org.apache.flume.tools.GetJavaProperty,引起此错误的原因一般来说是由于装了HBase等工具的原因,现在可以通过修改脚本的方法来解决,通过vim /usr/local/src/apache-flume-1.9.0-bin/bin/flume-ng打开,找到${HBASE_IN_PATH} org.apache.flume.tools.GetJavaProperty \
java.library.path,如下图所示:
(7)在java.library.path后加上:2>/dev/null | grep hbase,如下图所示:
(8)保存退出,然后在次执行flume-ng version,如下图所示:
(9)然后分发到其他机器上,配置环境,分发命令如:
scp -r apache-flume-1.9.0-bin root@slave1:/usr/local/src/
scp -r apache-flume-1.9.0-bin root@slave2:/usr/local/src/
(10)在其他两台服务器配置环境变量。
注意:在运行时,要将conf目录拷贝出来,在执行命令时用到