使用TextIO读取Mapr文件

Question

我能够使用TextIO.Read读取Mapr文件，文件放在hadoop文件夹中，并且能够在hadoop文件夹中写入文件。但我不确定是否需要使用org.apache.beam.sdk.io.hdfs，因为Mapr文件基于HDFS。

感谢。

Answer 1

所有基于Beam文件的IO透明地与各种支持的文件系统进行交互，这是与Beam进行交互的推荐方式。无需明确使用io.hdfs包中的类。