hadoop进程pid文件问题
来源:互联网 发布:阿里云有哪些服务 编辑:程序博客网 时间:2024/05/20 06:25
由于机器服务器维护需要,要求hadoop集群的一台服务器停止服务,于是我就到那台服务器去停止hadoop的datanode和tasktracker,运行以下命令:
bin/hadoop-daemon.sh stop datanode
竟然输出:
no datanode to stop
但是查看进程,却发现datanode和tasktracker都还在运行,尝试了好几次都是同样结果,最后我试图使用namenode的命令停止:
bin/stop_dfs.sh
还是输出:
no datanode to stop
不得已,只好使用暴力手段,直接kill -9 进程了。
在杀死hadoop进程之后,bin/hadoop-daemon.sh又可以正常使用了。不知道其他的hadoop使用者是否遇到过此问题??
但是问题不能就这么算了,在网上查了下资料,没找到满意的结果。没办法,自己看代码吧!
在看了hadoop-daemon.sh代码后,我发现脚本是通过pid文件来停止hadoop服务的,而我的集群配置是使用的默认配置,pid文件位于/tmp目录下,于是我对比了/tmp目录下hadoop pid文件中的进程id和ps ax查出来的进程id,发现两个进程id不一致,终于找到了问题的根源。
呵呵,赶紧去更新hadoop的配置吧!
修改hadoop-env.sh中的:HADOOP_PID_DIR = hadoop安装路径
然后根据集群hadoop进程的pid在hadoop安装路径下建立相应的pid文件:
hadoop-hadoop运行用户名-datanode.pid
hadoop-hadoop运行用户名-tasktracker.pid
hadoop-hadoop运行用户名-namenode.pid
hadoop-hadoop运行用户名-jobtracker.pid
hadoop-hadoop运行用户名-secondarynamenode.pid
bin/hadoop-daemon.sh stop datanode
竟然输出:
no datanode to stop
但是查看进程,却发现datanode和tasktracker都还在运行,尝试了好几次都是同样结果,最后我试图使用namenode的命令停止:
bin/stop_dfs.sh
还是输出:
no datanode to stop
不得已,只好使用暴力手段,直接kill -9 进程了。
在杀死hadoop进程之后,bin/hadoop-daemon.sh又可以正常使用了。不知道其他的hadoop使用者是否遇到过此问题??
但是问题不能就这么算了,在网上查了下资料,没找到满意的结果。没办法,自己看代码吧!
在看了hadoop-daemon.sh代码后,我发现脚本是通过pid文件来停止hadoop服务的,而我的集群配置是使用的默认配置,pid文件位于/tmp目录下,于是我对比了/tmp目录下hadoop pid文件中的进程id和ps ax查出来的进程id,发现两个进程id不一致,终于找到了问题的根源。
呵呵,赶紧去更新hadoop的配置吧!
修改hadoop-env.sh中的:HADOOP_PID_DIR = hadoop安装路径
然后根据集群hadoop进程的pid在hadoop安装路径下建立相应的pid文件:
hadoop-hadoop运行用户名-datanode.pid
hadoop-hadoop运行用户名-tasktracker.pid
hadoop-hadoop运行用户名-namenode.pid
hadoop-hadoop运行用户名-jobtracker.pid
hadoop-hadoop运行用户名-secondarynamenode.pid
- hadoop进程pid文件问题
- hadoop进程pid文件问题
- hadoop误删PID文件
- Hadoop 的PID路径问题
- hadoop的PID路径问题
- 查看进程PID与文件后缀名
- 通过进程pid查看文件安装路径
- hadoop pid
- 检查服务器的pid文件,如果文件不存在或pid对应的进程已死重启服务器
- ls -l |grep "^-"|wc -l 程序问题的定位—strace -p pid(跟踪系统调用)gdb -p pid(调试)lsof -p pid(查看当前进程打开的文件描述符) ps -e
- hadoop 集群及hbase集群的pid文件存放位置
- 设置Hadoop+Hbase集群pid文件存储位置
- 设置Hadoop+Hbase集群pid文件存储位置
- 设置Hadoop+Hbase集群pid文件存储位置
- 设置Hadoop+Hbase集群pid文件存储位置
- hadoop 问题| no datano to stop | kill -9 pid
- Visual Basic 通过PID获取进程文件路径
- Linux根据进程号找到PID文件所在的目录
- 【Android】短信管理代码
- HQL遇上的问题
- Oracle RMAN备份脚本
- hash算法及应用
- python学习笔记之二---object
- hadoop进程pid文件问题
- MFC DLL 中宏AFX_MANAGE_STATE的作用
- 【开源】我开发的贴吧(mysql5.2+linux+asp.net),先公开测试一下后台管理系统
- tcl/tk学习笔记:基本知识
- 数据库三范式
- 插件48:把HTML文件转换为RSS文件
- CSS之外部样式表
- 介绍下@Override
- goagent+proxy switchy 下facebook和youtube页面显示不正常的解决方法