是否有适用于AWS Redshift的开源调度工具?

时间:2016-09-13 15:44:51

标签: amazon-web-services amazon-redshift talend amazon-data-pipeline

我在事务中执行的sql语句(插入,更新,删除,截断)很少,每5分钟一次。我无法使用AWS Data Pipeline,因为管道的最小调度间隔为15分钟。我可以使用任何开源工具吗?我可以使用talend open studio来实现这个目标吗?

1 个答案:

答案 0 :(得分:0)

您可以尝试通过创建3条管道并将它们相隔5分钟来克服15分钟计划间隔的限制。

另一种解决方案是使用OnDemand管道。然后,您可以创建CloudWatch事件(带有计划)以触发lambda函数。在lambda中,您可以开始执行管道。