spark安装测试过程中提示<console>:10: error: not found: value sc

来源:互联网 发布:软件商店安装 编辑:程序博客网 时间:2024/06/09 04:10

终于要安装心心念念的spark了,安装过程参考的《深入理解spark-核心思想与源码分析》一书,但是在测试spark是否安装成功时,老是提示这样的错误:
错误提示
在网上查资料,说是在spark配置过程中出现了问题。网上给出的解决方法是把/conf路径下的spark-env.sh文件中配置的IP地址改一下,由原来的127.0.0.1改为10.10.10.204
.但是我改了之后依然不行。
最后终于被我发现了问题所在:
添加的配置应该是

export SPARK_MASTER_IP=127.0.0.1export SPARK_LOCAL_IP=127.0.0.1

而我的配置则是

export SPARK_MASTER_IP = 127.0.0.1export SPARK_LOCAL_IP = 127.0.0.1

是的,问题就出在空格上,记住,这里的空格一定不能留。保存关闭后再测试下
新的测试结果
成功,和书中结果一致!

阅读全文
0 0
原创粉丝点击