如何为MapR版本构建最新版本的Spark？

Question

我正在运行一个旧的MapR集群mapr3。

如何为mapr3构建Spark 1.5.x的自定义发行版？

Answer 1

我的理解是获得正确的hadoop.version是使一切运转的关键步骤。

我回到版本 spark 1.3.1 ，找到了hadoop.version=1.0.3-mapr-3.0.3的mapr3个人资料。要构建完整的分发，如果已经设置了JAVA_HOME，则以下命令将起作用：

./make-distribution.sh --name custom-spark --tgz -Dhadoop.version=1.0.3-mapr-3.0.3 -Phadoop-1 -DskipTests