Shell脚本:将变量传递到spark-shell会话

时间:2018-10-02 13:42:24

标签: bash shell apache-spark apache-spark-sql sh

我正在尝试将变量传递给spark-shell会话。本质上,我的目标是创建一个代码,该代码将逐行读取文本文件并执行文本文件中存在的SQL查询。为此,我需要能够将“ p”的值传递到spark会话中。但我无法这样做:

OAuth2RestTemplate

上面的代码给我以下错误:

RestTemplate

在此先感谢您的帮助!

1 个答案:

答案 0 :(得分:0)

当您编写:spark-shell << 'EOF'时,您在明确告诉外壳程序不要在heredoc中插入变量。删除引号并输入:

spark-shell << EOF
相关问题