HUE配置hadoop
来源:互联网 发布:财税律师知乎 编辑:程序博客网 时间:2024/05/29 16:44
HDFS配置
参考文档:http://archive.cloudera.com/cdh5/cdh/5/hue-3.9.0-cdh5.5.0/manual.html
Hadoop配置文件修改
hdfs-site.xml
<property>
<name>dfs.webhdfs.enabled</name>
<value>true</value>
</property>
core-site.html
<property>
<name>hadoop.proxyuser.hue.hosts</name>
<value>*</value>
</property>
<property>
<name>hadoop.proxyuser.hue.groups</name>
<value>*</value>
</property>
HUE配置文件修改
[[hdfs_clusters]] [[[default]]]
fs_defaultfs=hdfs://mycluster
webhdfs_url=http://node1:50070/webhdfs/v1
hadoop_bin=/usr/hadoop-2.5.1/bin
hadoop_conf_dir=/usr/hadoop-2.5.1/etc/hadoop
启动hdfs、重启hue
访问Web
解决方法:
修改默认的hdfs访问用户
修改hue.ini中的配置
default_hdfs_superuser=hdfs
改为
default_hdfs_superuser=root
重启hue
可以通过HUE的 文件浏览器 来操作hdfs的文件,进行增、删、改、查等操作。
但是修改文件内容是出现异常,查看日志文件:
解决方法:
1、 关闭hdfs的权限验证
hdfs-site.xml
<property>
<name>dfs.permissions.enabled</name>
<value>false</value>
</property>
需要重启hdfs和hue
2、 在hue中创建root用户,并以root用户登录hue。
Yarn配置
HUE配置文件修改
[[yarn_clusters]] [[[default]]]
resourcemanager_host=node1
resourcemanager_port=8032
submit_to=True
resourcemanager_api_url=http://node1:8088
重启HUE服务
运行workcout程序进行测试
hadoop jar /usr/hadoop-2.5.1/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.5.1.jar wordcount /test/wc/input /out1
- HUE配置hadoop
- Hue与hadoop的集成配置
- Hadoop实战(7)_Apache Hadoop安装和配置Hue
- Hadoop集成Hue详解
- HUE--高可用Hadoop平台-Hue In Hadoop
- Hue安装配置
- Oozie配置Hue
- Hue安装配置实践
- Hue安装配置实践
- HUE配置Spark Notebook
- hue配置问题
- Hue安装配置实践
- Hue安装配置实践
- hue安装与配置
- hue配置简介使用
- Hue安装及配置
- HUE安装与配置
- HUE配置HBase
- 二分匹配 4579: 多米诺骨牌II(中石油)
- 数据库的一致性?一致性弱意味着什么
- 用python2.7向mysql中存入中文
- 什么是厨房打印机?有哪些用途?如何连接wifi打印
- UNP(卷2:进程间通信)—— 第15,16章:远程过程调用(门,Sun RPC)
- HUE配置hadoop
- Python全栈工程师Day03学习笔记
- Mongodb下载、安装、配置与使用
- Qt 学习之路 2(9):资源文件
- HUE配置HBase
- 测试网站分享
- 点击哪个按钮对应图片显示,按钮对应颜色显示
- windows2003无法打开防火墙的解决方法
- 7-26 Windows消息队列(25 分)