Ambari学习17_Amabri 2.1安装HDP2.3.2 之 七、自定义HDP服务
来源:互联网 发布:淘宝开店必须要交钱吗 编辑:程序博客网 时间:2024/05/11 05:43
以zeppelin为例,它是一个基于网页的notebook,可以进行数据分析与可视化,zeppelin里有个概念是解释器,解释器使得很多后端语言能够像插件一样在zeppelin中使用,例如 Spark,、Python、sql、shell等等。具体介绍看zeppelin官网。
添加zeppelin服务时不必关掉其他服务。
我要用到python,而支持python的话需要自己编译zeppelin。
将编译好的zeppelin打包命名为zeppelin.tar.gz,拷贝到/tmp 文件夹下。
1. 下载服务向导包并解压
代码如下,其中,$VERSION 是HDP对应的版本号。
- 1
- 2
- 1
- 2
登入ambari 管理页面后,左侧一栏 点击 Actions ,结果如图:
勾选上zeppelin notebook:
选择安在某台机器上都可以,我选的master :
下一步,开始设置各项参数。
其中需要注意的有:
设置 zeppelin.install_python_packages=true
,表示要下载python包, zeppelin.setup.prebuilt=true
, 表示我们用自己编译的zeppelin,就是我们提前放到/tmp下的zeppelin.tar.gz。 zeppelin.setup.view=true
,表示有zeppelin view的快捷打开页面。
下面 zeppelin.executor.mem在这儿以下,根据你自己的内存及任务需要内存设置即可。一般512m够用。
在zeppelin-env template里,需要注意的有: export MASTER=yarn-client
代表zeppelin的任务要提交到yarn上执行。除了在yarn上执行,还可以本地执行,值为local。 SPARK_HOME HADOOP_CONF_DIR
和PYTHONPATH
要确保这些没有被注释。
在custom zeppelin-config里,添加一个属性: zeppelin.host.publicname
,值为安装zeppelin服务的机器的域名,对本集群而言,是master.org.cn,如图:
确认好配置信息后,下一步,
好了,开始安装啦~
等它完事儿就好~~
原文来自:http://blog.csdn.net/sinat_28224453/article/details/52223621
- Ambari学习17_Amabri 2.1安装HDP2.3.2 之 七、自定义HDP服务
- Amabri 2.1安装HDP2.3.2 之 七、自定义HDP服务
- Ambari学习2_ Ambari 2.1安装HDP2.3.2 之 六、安装部署HDP集群 详细步骤
- Ambari 2.1安装HDP2.3.2 之 六、安装部署HDP集群 详细步骤
- Amabri 2.1安装HDP2.3.2 之 一、HDP介绍
- Amabri 2.1 安装HDP2.3.2 之 四、安装ambari
- Ambari 2.1安装 HDP2.3.2 之 五、配置amabri-server
- Ambari学习14_升级ambari、HDP版本(ambari 2.1升级到2.4、HDP2.3升级到2.5)
- 升级ambari、HDP版本(ambari 2.1升级到2.4、HDP2.3升级到2.5)
- HDP学习--Ambari安装Hadoop集群步骤
- HDP之离线安装ambari-agent
- 使用ambari安装hdp
- Hortonworks HDP Ambari自动安装
- Hdp + Ambari 本地源安装
- AMBARI HDP 官方安装文档
- ambari 1.7.0安装HDP2.2
- 用Ambari安装hdp2.4错误汇总
- [hdp2.4系列] ambari安装配置
- INFORMATION_SCHEMA.INNODB_LOCKS
- kafka offset查询、提交
- java学习笔记之单链表的插入和删除
- 编码问题
- Shell脚本IF条件判断和判断条件总结
- Ambari学习17_Amabri 2.1安装HDP2.3.2 之 七、自定义HDP服务
- 因果图方法
- Java 序列化
- Java 编程风格指南--Google
- Java基础-集合框架2 Collection和Iterator接口
- MapWindow6初试
- ฏ๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎๎
- 【pta】实验1-8 输出倒三角图案
- C#性能优化总结