在Hadoop上使用Guava 15的NoSuchMethodError(2.3.0)

时间:2014-05-28 10:49:29

标签: hadoop guava cloudera-cdh

我有一个用于Hadoop的编译jar包括这个库:

com.google.guava:guava:jar:15.0:compile

当我将它提交到我的Hadoop CDH5.0.1集群时,我有这个错误:

java.lang.NoSuchMethodError: com.google.common.base.Stopwatch.createStarted()Lcom/google/common/base/Stopwatch;
    at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
    at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
    at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
    at java.lang.reflect.Method.invoke(Method.java:606)
    at org.apache.hadoop.util.ProgramDriver$ProgramDescription.invoke(ProgramDriver.java:72)
    at org.apache.hadoop.util.ProgramDriver.run(ProgramDriver.java:144)
    at org.apache.hadoop.util.ProgramDriver.driver(ProgramDriver.java:152)
    at com.trovit.pipeline.AdsPipelineDriver.main(AdsPipelineDriver.java:17)
    at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
    at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
    at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
    at java.lang.reflect.Method.invoke(Method.java:606)
    at org.apache.hadoop.util.RunJar.main(RunJar.java:212)

主要的是Hadoop在其类路径中有一个旧版本的guava,在我之前加载它并崩溃,因为使用的函数不存在。

我已尝试过配置参数,例如 mapreduce.task.classpath.user.precedence mapreduce.task.classpath.first mapreduce。 job.user.classpath.first 但没有一个工作。

解决这个问题的猜测是什么?

0 个答案:

没有答案