将动态cron作业添加到GAE

时间:2012-08-24 21:18:10

标签: java google-app-engine crontab job-scheduling

在GAE中,我们可以通过编辑cron.xml文件手动添加cron作业

<?xml version="1.0" encoding="UTF-8"?>
<cronentries>
  <cron>
    <url>/cron/addCount/1</url>
    <description>Add count + 1 every 1 minutes</description>
    <schedule>every 1 minutes</schedule>
  </cron>
</cronentries>

有没有什么方法可以创建用户界面并动态创建/更新/删除尽可能多的cron作业。这意味着在部署到GAE之后,我应该能够更新cron.xml吗?或者有一个解决方法,以便我可以动态创建cron作业吗?

3 个答案:

答案 0 :(得分:2)

不,这是不可能的。

您应该将此计划数据保存到数据存储区,然后每分钟运行一次cron并检查是否有需要执行的操作。基本上你会做自己的简单调度程序。

答案 1 :(得分:2)

您可以使用推送队列来创建和运行任务。

答案 2 :(得分:0)

2019年更新


为此创建了

Google Cloud Scheduler。它实质上是在后台运行托管cron作业(包括对失败的作业进行自动重试)。

Cloud Scheduler REST API

RPC reference

((我还建议考虑@Peter Knego的建议,以基于DataStore条目创建自己的调度程序,因为如果您需要创建许多调度的任务,与使用Google Cloud Scheduler相比,这可能更灵活且成本更低)或围绕任务调度的复杂规则)


另一个可能的选择(取决于您的用例)是Google Cloud Tasks。这是Google最近推出的Push Queues的较新替代品,并且有一个API以编程方式创建新任务。 Cloud Tasks实质上集中了Google Cloud中的Push Queue管理(尽管您可以继续对现有应用程序使用带有较旧API的Push Queue)。

我一般不建议将其用作实现OP建议的动态任务类型的方法,因为“推队列”实际上是用于消息处理的,尤其是用于大容量消息传递时(请参阅我关于“计划任务”的注释与推送队列”)。

如果推送队列 是适合您的用例的选项,则快速入门指南提供了Google Cloud Tasks API使用示例。以下链接提供了Java,Python,C#和其他语言的示例):

https://cloud.google.com/tasks/docs/quickstart-appengine


计划任务与推送队列

  • Google Cloud Scheduler =计划的任务
  • Google Cloud Tasks =推送队列(消息排队)

您可能会问您如何决定使用计划任务(例如Google Cloud Scheduler)和推送队列(例如使用Google Cloud Tasks)。

计划任务通常用于运行时间更长或更密集的处理任务,或者用于预测和控制任务何时运行的重要任务。例如,大型数据集的聚合或处理。或批量处理数据。您可以将cron jobs视为计划任务的计划定义/配置。

推送队列本质上是持久消息队列的一种形式,通常更适合处理大流量的系统,例如繁忙的电子商务网站,需要将来自用户的请求或“消息”与处理它们的系统(例如Web后端或数据库服务器)分离。此体系结构在高容量系统中用于将消息排队以进行处理,并优先处理请求的可靠性,而不是优先针对服务后端进行即时处理。推送队列与发布/订阅体系结构和技术(例如Google Cloud Pub/Sub

)紧密相关