Flume实战案例 -- 采集某个目录到HDFS
2021-06-21 03:04
阅读：480
spooldir特性：
1、监视一个目录，只要目录中出现新文件，就会采集文件中的内容
2、采集完成的文件，会被agent自动添加一个后缀：COMPLETED
3、此source可靠，不会丢失数据；即使flume重启或被kill
注意：
所监视的目录中不允许有同名的文件；且文件被放入spooldir后，就不能修改
①如果文件放入spooldir后，又向文件写入数据，会打印错误及停止
②如果有同名的文件出现在spooldir，也会打印错误及停止
下一篇：PHP设置定时任务
文章来自：搜素材网的编程语言模块，转载请注明文章出处。
文章标题：Flume实战案例 -- 采集某个目录到HDFS
文章链接：http://soscw.com/index.php/essay/96716.html
文章标题：Flume实战案例 -- 采集某个目录到HDFS
文章链接：http://soscw.com/index.php/essay/96716.html
评论
亲，登录后才可以留言！