Spark伪分布式环境搭建
来源:互联网 发布:手机ps照片软件 编辑:程序博客网 时间:2024/05/23 15:05
1、解压:tar -zxvf spark-2.1.0-bin-hadoop2.4.tgz -C ~/training/
conf/目录下:
cp spark-env.sh.template spark-env.sh #重命名
cp slaves.template slaves #重命名
2、配置参数文件:
(1) conf/spark-env.sh
export JAVA_HOME=/usr/java/jdk1.8.0_11
export SPARK_MASTER_HOST=master
export SPARK_MASTER_PORT=7077
(2) conf/slaves —->配置从节点的主机信息
localhost ->master
3、启动Spark伪分布环境
sbin/start-all.sh
检验:jps
Spark Web Console: http://192.168.222.100:8080
阅读全文
1 0
- Spark伪分布式环境搭建
- Spark伪分布式环境搭建
- spark环境搭建,伪分布式、集群
- spark-伪分布式搭建
- Spark伪分布式搭建
- 构建Spark分布式集群第一步:搭建Hadoop伪分布式环境
- spark分布式,伪分布式搭建
- Spark分布式环境搭建
- Hadoop伪分布式环境搭建
- Hadoop伪分布式环境搭建
- Hadoop伪分布式环境搭建
- Hadoop伪分布式环境搭建
- hadoop伪分布式环境搭建
- Hadoop伪分布式环境搭建
- 伪分布式hadoop环境搭建
- Hadoop伪分布式环境搭建
- Hadoop伪分布式环境搭建
- (二)、伪分布式环境搭建
- MYSQL常用命令
- 纯HTML引入功能JS,CSS
- Python csv文件写入
- SpringMVC的相关配置
- 数据特征选择法
- Spark伪分布式环境搭建
- POJ-2763 Housewife Wind (树链剖分 入门题 树状数组 单点修改 区间查询)
- puppeteer学习(三)——抓取“相关搜索”关键词&搜索豆瓣图书榜
- vue.js开发环境搭建
- 一文看清云栖大会今日阿里重磅产品发布
- 阿里云发布新物种神龙云服务器 媲美物理机性能的弹性云服务器
- Eclipse控制台中的中文输出乱码问题
- 我面试到的培训公司
- HBuilder常用快捷键总结