基于事件触发Pig作业

时间:2014-03-13 10:52:51

标签: hadoop elasticsearch apache-pig

我有一个使用Flume将应用程序日志数据提取到Hadoop的系统。我使用Elasticsearch通过运行Pig脚本将数据从Hadoop加载到ES来索引此数据。现在,我需要自动执行此任务,以便每次添加新行时,都应触发脚本,或者无论何时触发脚本,它都只加载新写入的行。有谁能告诉我如何实现这个目标?

0 个答案:

没有答案