hadoop 常用命令

来源:互联网 发布:服务器端编程python 编辑:程序博客网 时间:2024/04/29 00:21

Configuration 是一个类 Hadoop中的组建的配置是通过Hadoop提供的API来进行的 一个Configuration代表配置属性及其取值的一个集合
hadoop fs -copyFromLocal  本地  HDFS目的地
hadoop fs -mkdir  目录名字
hadoop fs -lsr 查询目录下的文件
hadoop xxx argus[0]  argus[1]
hadoop fs  -cat  /user/lilin/hello.txt //查看该文件内容
hadoop dfsadmin -safemode enter
hadoop dfsadmin -safemode leave
hadoop dfsadmin -report
hadoop dfsadmin  -help
hadoop dfsadmin  -finalize Upgrade
start-dfs.sh -rollback 如果需要退回到老版本,就必须停止集群并且部署老版本的Hadoop 用回滚选项启动集群
hadoop  fs  -help 很有用
HDFS支持动态添加DataNode,而不中断服务../hdfs-daemon.sh start datanode
hadoop fs –rmr example.txt 删除hdfs中的文件
上传 hadoop  fs  -put  源文件  目标文件夹
重要的提示
启动时 namenode 信息文件夹 not accessable 从新format

-Xmx512m JVM最大内存空间

1) '/etc/init.d/iptables stop' -->stopped firewall
2) SELINUX=disabled in '/etc/selinux/config' file.-->disabled selinux
I worked for me after these two changes
 
Apache Ant,是一个将软件编译、测试、部署等步骤联系在一起加以自动化的一个工具,大多用于Java环境中的软件开发。由Apache软件基金会所提供。   
用户群:大多数的Java设计都被用于管理大量信息流,例如纽约州就使用Apache Ant去管理美国最大的青年计划,每天可以实时更新超过25万学生的记录。

原创粉丝点击