Big Query在实时XML数据中是否值得?

时间:2012-07-05 15:00:43

标签: google-bigquery

我有一个大约2 MB的xml文件(是的!2MB小文件),我想以某种预定的格式对文件进行排序,并显示格式化的结果,因为整个过程不需要2-3秒,我们希望减少时间。

我的问题是 (a)任何直接将XML推入大查询而不是CSV的方法。 (b)我想要实时,所以如何从我的网站推送数据,并将数据恢复到我的网站上。 (你认为命令行会做什么? (c)我正在研究.NET。

1 个答案:

答案 0 :(得分:3)

我认为你不能直接将XML推入BigQuery。 documentation没有说“您无法导入XML”。但事实上,它只解释了如何使用CSV,这一点非常清楚。

这听起来不像是BigQuery的完美用例。 BigQuery非常适合大量数据,但您拥有的数据很少(如您所述)。如果不将XML推送到内存而不是将其推送到其他地方,它会不会更快?

相关问题