Windows 10 安装spark
来源:互联网 发布:哈尔滨java培训机构 编辑:程序博客网 时间:2024/05/16 07:08
安装Java
- 安装Java JDK, 注意, 安装路径不能有空格, 比如c:\program files\java是不行的, 我是装在c:\Java
- 安装好后设置环境变量JAVA_HOME=c:\Java\jdk_path
安装winutils
- 上https://github.com/steveloughran/winutils/tree/master/ 下载winutils, 要注意版本要和你将要下载的spark要保持一致
- 在机器上建一个hadoop\bin目录, 我是建在c:\hadoop\bin, 然后把下载好的winutils.exe放进来
- 设置环境变量HADOOP_HOME=c:\hadoop
下载Spark
- 从spark上下载最新的spark
- 直接解压, 我是放到了c:\spark目录
- 开一个cmd窗口, 运行bin\spark-shell试试
其它
- 如果出现The root scratch dir: /tmp/hive on HDFS should be writable错误, 用winutils重新设置一下目录权限
具体方法- 开一个cmd
- cd 到c:\hadoop\bin
- 运行winutils.exe chmod -R 777 c:\tmp
阅读全文
0 0
- Windows 10 安装spark
- 【亲测】windows 10 下安装spark
- spark windows 单机 安装
- windows下安装Spark
- windows安装spark
- Windows 下 spark 安装
- windows中安装Spark
- Ejabberd Windows下安装+spark
- windows下安装配置spark
- windows下安装spark环境
- windows环境下安装spark
- windows 10 安装 spark 环境(spark 2.2.1 + hadoop2.7)
- 【Spark系列1】Windows下Spark单机版的安装
- windows安装spark后spark-shell启动报错
- spark windows单机安装,intellij、eclipse开发
- 在Windows上安装单机Spark
- Windows下单机安装Spark开发环境
- Windows下单机安装Spark开发环境
- goto语句的“跳跃”问题
- HPUOJ 1409: Watch Dog [最小生成树]
- Android应用资源总结四:colorAccent,colorPrimary,colorPrimaryDark等的意义
- 【HDU
- 数据结构编程笔记三:第二章 线性表 顺序表的实现
- Windows 10 安装spark
- 网联 vs 银联
- 微信小程序开发实践点滴——Bmob常用API的使用
- leetcode-51-N-Queens II
- Python基础四
- SED高级编辑命令
- Java UML类图详解
- 使用Coding.net+Hexo+node.js+git来搭建个人博客
- 算法题/求二进制数中1的个数