配置flume以从不同目录中读取日志

时间:2013-11-13 10:43:35

标签: hadoop file-transfer flume

不同的应用程序正在将其日志写入不同的目录结构。我想读取这些日志并将其放入接收器(可以是hadoop或物理文件)。 水槽如何支持单个代理的多个来源?是否可以为单个代理商提供多个来源? 任何人都可以指导我吗?

谢谢和问候 Chhaya

1 个答案:

答案 0 :(得分:0)

使用多个来源配置您的水槽代理 - 每个日志文件一个。它们应该是假脱机文件源类型。请注意,当源获取文件时,它不需要更改 - 您需要配置源以确保这一点..

然后,这些来源可以转到一个可以有一个接收器的通道。