如何使用Jupyter笔记本（Anaconda3，Ubuntu的）

Question

，我没有下载anaconda3，spark1.6.1，JAVA，混帐等运行星火...

，我设置了环境这样

$ nano .bashrc 
export PATH="/home/moon/anaconda3/bin:$PATH" 

export SCALA_HOME=/usr/local/src/scala/scala-2.12.1 
export PATH=$SCALA_HOME/bin:$PATH 

export SPARK_PATH=~/spark-1.6.1-bin-hadoop2.6 
export PATH=$SPARK_PATH/bin:$PATH  

export ANACONDA_ROOT=/usr/home/moon/anaconda3 
export PYSPARK_PYTHON=$ANACONDA_ROOT/bin/python3 

export PYSPARK_DRIVER_PYTHON="jupyter" 
export PYSPARK_DRIVER_PYTHON_OPTS="notebook" 

$. .bashrc 

$cd spark-1.6.1-bin-hadoop2.6 
$bin/pyspark 

然后我可以连接笔记本jupyter（python3）
但我不能老是跑火花前）SC，sc.textFile

如何集成火花和jupyter

Answer 1

请在下面添加。

PYSPARK_DRIVER_PYTHON=ipython PYSPARK_DRIVER_PYTHON_OPTS="notebook" ./bin/pyspark 

下面还要检查： Apache Spark: How to use pyspark with Python 3

我面临水蟒蟒3一些兼容性的问题，我切换到水蟒蟒2.7