有没有办法使用Pydoop将数据附加到hdfs文件?

时间:2016-09-12 20:28:41

标签: python hadoop hdfs

我正在尝试使用python将对象的内容写入hdfs中的文件。为此,我发现在python中实现了一个名为Pydoop的hdfs API。阅读API,我可以轻松地使用pydoop的dump()方法将内容写入hdfs路径中的文件,但是没有看到任何可以将新内容附加到旧文件的append()方法。我知道这是可能的,因为我已经找到了hdfs的命令行语法来做到这一点但是考虑使用pydoop来做这件事。任何帮助将不胜感激。感谢

1 个答案:

答案 0 :(得分:0)

没有使用过Pydoop,但这就像Python API一样,可以附加到常规文件中。

ajax:complete