如何在Spark2.0.2中启动Ipython Notebook
来源:互联网 发布:云计算的运用 编辑:程序博客网 时间:2024/06/13 23:50
最近因为学习《Spark机器学习》,里面的第三章涉及到了ipython notebook ,老版本的spark直接在Spark根目录下输入一下就可
IPYTHON=1 IPYTHON_OPTS=’–pylab’ ./bin/pyspark
可是我下载的是最新的spark2.0.2,这个接口改变了!
解决方法1:
需要改成如下命令才行:
PYSPARK_DRIVER_PYTHON=ipython PYSPARK_DRIVER_PYTHON_OPTS=’notebook’ ./bin/pyspark
解决方法2:
如果不想上述输入的话,可以直接在/bin/pyspark文件中改动代码,将YSPARK_DRIVER_PYTHON=ipython PYSPARK_DRIVER_PYTHON_OPTS=’notebook’这两条语句赋值到里面也可,具体的只要你一看pyspark里面的代码就清楚了,但是建议不要改动。
解决方法3:
就是修改 ~/.bashrc 文件,添加以下内容:
export PYSPARK_DRIVER_PYTHON=ipython
export PYSPARK_DRIVER_PYTHON_OPTS=”notebook”
然后source ~/.bashrc,就可以通过启动 pyspark 来启动 IPython Notebook 了,原理同上。
阅读全文
0 0
- 如何在Spark2.0.2中启动Ipython Notebook
- 如何在Spark2.0.2中启动Ipython Notebook
- Centos 6.4 中IPython如何启动Qt控制台和NoteBook?
- 如何在win 下安装ipython notebook
- 在ipython notebook中使用argparse
- 在Spark中使用IPython Notebook
- 在 Spark 中使用 IPython Notebook
- 如何在win7 64下安装ipython notebook
- 如何在win7 64下安装ipython notebook
- 如何向IPython Notebook中导入.py文件
- 在windows中打开ipynb文件 ipython notebook jupyter
- 在Ubuntu14.04中安装多版本内核ipython notebook(jupyter notebook)
- ipython notebook
- Ipython notebook
- ipython notebook
- ipython+notebook
- IPython notebook
- ipython notebook
- Java集合-ArrayList源码分析
- 设计模式
- arch/x86/mm/pageattr.c
- 嵌入式Linux驱动笔记(八)------依赖Linux kernel驱动的pwm编写
- ssh登陆Linux
- 如何在Spark2.0.2中启动Ipython Notebook
- Hbase 集群维护
- HDU 2049-不容易系列之(4)——考新郎
- TreeSet集合的两种排序
- rbtree原理及应用--使用
- ZooKeeper学习笔记:netcat命令基本用法与客户端连接zookeeper
- QGCToolbox
- codeforces 680C Bear and Prime 100(数论)
- Python之运算符以及基本数据类型的objec