IntelliJ将spark源代码编译为jar

时间:2017-08-24 09:40:18

标签: apache-spark intellij-idea spark-streaming intellij-14

我试图在IntelliJ中添加spark作为jar。我之所以这样做是因为我需要在spark的配置文件夹中添加一些新的xml-s,如 hive-site.xml 等。

我不知道如何以其他方式添加它。有人试过吗? 对不起,如果这是noob问题但是:S

P.S。我正在使用SBT并且当前在 build.sbt 中使用spark2作为libDependencie但是这样我就找不到spakr2配置文件来设置 hive-site.xml 文件,以便他可以使用它。

编辑: 我正在使用 SparkSession

0 个答案:

没有答案