Flume实战案例 -- 采集某个目录到HDFS

2021-06-21 03:04

阅读:483

spooldir特性:

1、监视一个目录,只要目录中出现新文件,就会采集文件中的内容

2、采集完成的文件,会被agent自动添加一个后缀:COMPLETED

3、此source可靠,不会丢失数据;即使flume重启或被kill

注意:

所监视的目录中不允许有同名的文件;且文件被放入spooldir后,就不能修改

①如果文件放入spooldir后,又向文件写入数据,会打印错误及停止

②如果有同名的文件出现在spooldir,也会打印错误及停止


评论


亲,登录后才可以留言!