数据准备预处理到Ml引擎

时间:2018-02-27 20:56:45

标签: google-cloud-platform google-cloud-dataflow

假设我在App Engine上有代码阅读Gmail附件,解析它是通过数据准备配方和步骤进入云数据存储,存储回数据存储,然后通过ML Engine Tensorflow模型进行预测?

参考: enter image description here

这一切都可以通过Dataflow实现吗?

编辑1: 是否可以导出数据准备步骤并在Ml Engine Tensorflow模型之前将它们用作预处理?

1 个答案:

答案 0 :(得分:1)

可以定义Cloud ML Engine模型的输入,以便更好地了解您的项目。这意味着您可以按照您认为合适的方式应用preprocessing步骤,然后将数据发送到Tensorflow模型。

确保Tensorflow模型支持您在Dataprep步骤中使用的format。将Dataprep配方应用于所有必需步骤后,请确保使用适当的格式,例如CSV。建议您将输入存储到云存储桶以便更好地访问。

我不知道您对Cloud Dataprep的熟悉程度,但您可以尝试this检查如何处理您希望包含在食谱中的所有步骤。

相关问题