Spark与机器学习(一)

来源:互联网 发布:电子秤数据存在 编辑:程序博客网 时间:2024/05/19 21:16

因为在看一本《Spark 与机器学习》的书,正好开一个新坑,记录一下学习中遇到的问题

关于zip解压

zip : unzip filename
tar or tgz: tar zxvf filename

关于设置jupyter notebook远程访问

由于是在阿里云ECS上完成的,就一步一步按配置过程记录一下

登录远程服务器

生成配置文件

jupyter notebook --generate-config

生成密钥

在终端输入ipython(新版本的jupyter)

In [1]: from notebook.auth import passwdIn [2]: passwd()Enter password: ### 这里输入两次密码,在远程连接的时候使用###Verify password: Out[2]: 'sha1:ce23d945972f:34769685a7ccd3d08c84a18c63968a41f1140274'

生成的’sha1:….’复制下来

修改默认配置文件

$vim ~/.jupyter/jupyter_notebook_config.py 

在文件任意位置加入以下内容

c.NotebookApp.ip='*'c.NotebookApp.password = u'sha:ce...刚才复制的那个密文'c.NotebookApp.open_browser = Falsec.NotebookApp.port =8888 

启动jupyter notebook

jupyter notebook

 远程访问

直接从本地浏览器直接访问http://address_of_remote:8888就可以看到jupyter的登陆界面