Hadoop Pig - 如何设置中间结果的目录

时间:2015-03-19 16:46:08

标签: hadoop apache-pig

我的Pig工作正在将中间结果存储在我的硬盘上,这很小。我希望Pig将这些中间结果存储在/ data上。我必须更改哪个设置?

1 个答案:

答案 0 :(得分:1)

我必须在pig conf文件中添加以下导出(/pig.-0.14.0/conf/pig-env.sh):

export PIG_OPTS="$PIG_OPTS -Dhadoop.tmp.dir=$path_to_big_hard_drive -Dpig.temp.dir=$path_to_big_hard_drive"