hadoop LocalJobRunner无法正常工作?

时间:2014-04-10 10:46:08

标签: hadoop mapreduce

我正试图从hadoop-definitive guide 3rd edition中运行示例。在第5章中,作者演示了使用LocalJobRunner类,它有助于从本地找到的输入数据运行hadoop作业并在本地输出结果。为此作者告诉将configuratin属性mapred.job.tracker设置为" local"。我已经这样做但仍然程序试图在hdfs中找到输入和输出路径。

我的第二个问题是我无法在hadoop 2.3.0 javadocs api中找到LocalJobRunner类?

1 个答案:

答案 0 :(得分:0)

i have managed to find the answer to my first part of the question. the problem was with my configuration.xml file. i was using following values :

<configuration>
<property>
<name>fs.default.name</name>
<value>hdfs://localhost/</value>
</property>
<property>
<name>mapred.job.tracker</name>
<value>localhost:8021</value>
</property>
</configuration>

实际配置应为

<configuration>
<property>
<name>fs.default.name</name>
<value>file:///</value>
</property>
<property>
<name>mapred.job.tracker</name>
<value>local</value>
</property>
</configuration>

然而我仍然没有找到我的第二部分问题的答案,即我无法在hadoop 2.3.0 docs中找到LocalJobRunner。这是docs hadoop javadocs

的链接