在应用引擎上执行长时间运行流程的正确方法是什么?

时间:2017-08-23 15:58:40

标签: google-app-engine go goroutine

我正在使用Go on App Engine而我正在尝试构建一个需要执行长时间运行后台任务的API - 在这种情况下,它需要解析并将一个大文件分块到任务队列。我希望它返回200并立即关闭用户连接并让进程在后台继续运行直到它完成(这可能需要5-10分钟)。单独的任务队列并不适用于我的用例,因为解析初始文件可能需要超过API请求的时间限制。

首先,我尝试使用Go例程作为此问题的解决方案。这失败是因为我的应用引擎上下文在父函数关闭用户连接后立即过期。 (我想我可以尝试编写一个不需要上下文的go例程,但是我失去了日志记录,我需要获取整个远程文件并将其传递给go例程。 )

通过文档查看,看起来App Engine过去常常具有支持我想要做的功能:[runtime.RunInBackground],但现在不推荐使用该功能,并且替换不是很明显。

是否有"权利"或推荐的方法现在进行后台处理?

我想我可以把我的大文件链接放到任务队列中,但如果我理解正确,即使是通过任务队列调用的函数也必须在指定的时间内完成执行(是90秒?)我需要能跑得比这长。

感谢您的帮助。

1 个答案:

答案 0 :(得分:0)

尝试使用: appengine.BackgroundContext() 它应该是长期的,但仅适用于GAE Flex