设置hadoop的client端的jvm参数
来源:互联网 发布:吴师自通 知乎 编辑:程序博客网 时间:2024/06/05 05:45
以此来纪念自己的解决方法:
今天遇到一个问题:怎么设定hadoop提交程序时client的jvm大小(即hadoop jar 这个提交程序jvm的大小)。
网上兜了一大圈,都是说什么设定map或Reduce任务的jvm的大小。可这个不是我所想要的,最后改变了收索关键词后(hadoop client jvm)发现了一片文章讲述了这样一个场景,跟着其指示做了一下,发现真的可以。
下面就是设定:
首先要找到我们安装好hadoop后我们的hadoop-env.sh文件在哪,cdh(4.2.0)的一般在/etc/hadoop/conf 下面。
其二,打开这个hadoop-env.sh文件,找到一个
# The following applies to multiple commands (fs, dfs, fsck, distcp etc)
export HADOOP_CLIENT_OPTS="-Xmx4294967296 -Xms4294967296 $HADOOP_CLIENT_OPTS"
这个export开始可能是被注释掉了,把注释去掉,添加自己需要的jvm参数
最后,保存这个修改即可。
这样我们就可以在hadoop jar时享受自己调节jvm的参数了。
0 0
- 设置hadoop的client端的jvm参数
- 设置Maven的JVM参数
- Tomcat JVM 的设置参数
- 设置Maven的JVM参数
- 设置tomcat的jvm参数
- 设置Maven的JVM参数
- 设置Maven的JVM参数
- [Hadoop]设置Task的jvm heap size
- hadoop------RPC的Client
- weblogic设置JVM的几个参数说明
- jvm的参数含义及设置
- jvm的参数含义及设置
- jvm的参数含义及设置
- 设置安装版Tomcat的JVM参数
- 设置eclipse中resin的JVM参数
- tomcat下设置jvm的相关参数
- Eclipse设置JVM的内存参数
- Eclipse-设置JVM的内存参数
- oracle如何查询和停止正在运行的job
- Eclipse项目上有红色感叹号的解决方法
- perl: warning: Setting locale failed
- ANDROID内存优化(大汇总——中)
- RabbitMQ
- 设置hadoop的client端的jvm参数
- 算法--算法运行时间比较
- xml系列(四)------创建xml文件
- IOS-UIImageView
- 录制脚本时,一直显示0 events,最后蒙对了!
- WebView中的Cookies问题
- SELinux简介
- 一个简单的dgrid表格
- 使用httpclient 连接 restful webservices实例 绝对可用 get的--post