更改.sparkStaging目录的位置

时间:2016-02-11 12:44:13

标签: apache-spark

对于我的所有应用程序,spark会在<myPath>/.sparkStaging HDFS下创建其工作目录。是否有可能告诉spark在每个应用程序的不同位置创建此临时目录?

我探索了Configurations,我找到的最接近的相关是spark.local.dir,但我不认为这会解决目的。有什么建议吗?

0 个答案:

没有答案