在Spark 1.4.0中编写一个简单的程序

Question

我是Spark的新人。我在debian 8中安装了jdk8和eclipse（mars）。并安装了Spark1.4.0并使用了sbt / sbt汇编命令来获取所有必需的。 COuld有人告诉我如何使用需要在java中编码的eclipse ide在spark中编写一个简单的hello程序。或者告诉我一个url做同样的事情。我需要一步一步的帮助。

提前谢谢

Answer 1

您可以制作maven项目并添加spark 1.4 maven依赖项，如下所示。

<dependency>
    <groupId>org.apache.spark</groupId>
    <artifactId>spark-core_2.10</artifactId>
    <version>1.4.0</version>
</dependency>

开始在eclipse ide中编码。 您可以关注this或this，here是火花示例代码中的java wordcount

该链接适用于scala，但java也是如此。希望它会有所帮助。