flume是一个海量日志采集聚合,传輸的系统
修改JAVA_HOME为本机的jdk安装目录即可
flume通过读取按照一定规则写好的配置文件,来启动agent进行传输,每一行数据被封装成一个event
举例介绍配置文件的写法
1监听一个文件夹,并将文件夹中新增内容输出到控制台(屏幕)
保存退出然后启动agent:
2,监听一个文件夹将其下新增文件上传到hdfs上。
保存退出然后启动agent:
然后可以在本地文件夹下新增文件,flume就按照指定的规则上传到hdfs上