Question

最近我在VMware的Windows机器上安装了cloudera quickstart vm 5.8。默认情况下，Spark UI链接和Zookeeper链接不在Hue上，所以，我刚刚编辑了hue.ini，

app_blacklist = zookeeper, spark

到

app_blacklist =

执行此操作后，我可以下载一些Spark示例，但仍未显示Spark UI链接。但是我能够获得zookeeper UI链接。

从下载的示例中，我选择了样本笔记本，通过它我可以获得Spark笔记本UI。它有一些例子，但当我运行它们时，我得到以下错误。

HTTPConnectionPool(host='localhost', port=8998): Max retries exceeded with url: /sessions (Caused by NewConnectionError('<requests.packages.urllib3.connection.HTTPConnection object at 0x7fdd7c5f2e50>: Failed to establish a new connection: [Errno 111] Connection refused',))

除了我在hue.ini文件中所做的更改之外，我是否需要进行任何更改。请指导我完成这个。

Answer 1

安装livy服务器并使用终端中的以下命令运行它后，错误得到纠正;

export SPARK_HOME=/usr/lib/spark
export HADOOP_CONF_DIR=/etc/hadoop/conf
$HOME/livy-server-0.2.0/bin/livy-server

Hue的Spark笔记本没有在cloudera quickstart vm上工作

1 个答案: