如果使用Spark <1.2,则可以简单地bin/pyspark
使用环境变量执行IPYTHON=1
。
IPYTHON=1 /path/to/bin/pyspark
要么
export IPYTHON=1
/path/to/bin/pyspark
尽管以上内容仍可在Spark 1.2及以上版本上正常使用,但建议为这些版本设置Python环境的方法是 PYSPARK_DRIVER_PYTHON
PYSPARK_DRIVER_PYTHON=ipython /path/to/bin/pyspark
要么
export PYSPARK_DRIVER_PYTHON=ipython
/path/to/bin/pyspark
您可以替换ipython
为您选择的解释器的路径。