Hadoop - copyFromLocal内部工作流程?

时间:2012-10-15 08:19:20

标签: hadoop hdfs

当我们发出copyFromLocal等命令或将数据从客户端复制到HDFS时,这个过程实际上是如何工作的?

我在HDFS架构中读到,客户端将联系Namenode以获取datanode列表,然后进行连接并传输数据。 有没有其他方法或任何方法使其更快???

哪个类正在调用此行为?例如检查datanode列表等...

提前致谢!

1 个答案:

答案 0 :(得分:0)

您可以开始浏览类

中方法copyFromLocal的代码
org.apache.hadoop.fs.FsShell 

为了方便起见,我引用了url