我试图通过在控制台输入PySpark来启动浏览器中的pyspark notebook,但是我得到了以下错误:
c:\Spark\bin>pyspark
python: can't open file 'notebook': [Errno 2] No such file or directory
我在这里做错了什么?
请帮帮忙?
发布于 2017-02-21 16:37:07
听起来jupyter笔记本要么没有安装,要么不在你的路径中。
我更喜欢在我的python发行版中使用Anaconda,而Jupyter是标准的,它也会安装所有必要的路径信息。
之后,只要您正确地设置了PYSPARK_PYTHON_DRIVER=jupyter
和PYSPARK_PYTHON_DRIVER_OPTS='notebook'
,就可以开始工作了。
发布于 2018-09-03 10:08:15
您希望在调用命令pyspark
时启动jupyter notebook。因此,您需要在bash_profile
或zshrc_profile
中添加以下内容。
export PYSPARK_SUBMIT_ARGS="pyspark-shell"
export PYSPARK_DRIVER_PYTHON=ipython
export PYSPARK_DRIVER_PYTHON_OPTS="notebook" pyspark
https://stackoverflow.com/questions/42371257
复制