Hadoop命令行基本操作
来源:互联网 发布:电子相册什么软件好 编辑:程序博客网 时间:2024/05/12 02:09
Hadoop 重要的端口
1.Job Tracker 管理界面:50030
2.HDFS 管理界面 :50070
3.HDFS通信端口:9000
4.MapReduce通信端口:9001
常用访问页面
1. HDFS 界面
http://hostname:50070
2. MapReduce 管理界面
http://hostname:50030
格式化文件系统
hadoop namenode –format
启动hadoop
* start-all.sh 启动所有的Hadoop守护。包括namenode, datanode, jobtracker, tasktrack
* stop-all.sh 停止所有的Hadoop
- start-mapred.sh 启动Map/Reduce守护。包括Jobtracker和Tasktrack
stop-mapred.sh 停止Map/Reduce守护
start-dfs.sh 启动Hadoop DFS守护Namenode和Datanode
- stop-dfs.sh 停止DFS守护
将当前目录转移至 /usr/local/hadoop即可执行命令
基本命令:
启动 sbin/start-dfs.sh
关闭 sbin/stop-dfs.sh
创建用户目录 bin/hdfs dfs -mkdir -p /user/hadoop
创建用户目录后即可使用用户目录的相对路径
复制文件 bin/hdfs dfs -put etc/hadoop/*.xml input
查看文件列表 bin/hdfs dfs -ls input
运行MapReduce作业 /usr/local/hadoop/bin/hadoop jar share/hadoop/mapreduce/hadoop-
mapreduce-examples-*.jar grep input output ‘dfs[a-z.]+’
查看运行结果 bin/hdfs dfs -cat output/*
将结果取回到本地 bin/hdfs dfs -get output output
删除hdfs上的output文件夹 bin/hdfs dfs -rm -r /user/hadoop/output
- Hadoop命令行基本操作
- hadoop操作命令行
- svn 命令行基本操作
- BASH命令行基本操作
- MySql命令行基本操作
- Git基本命令行操作
- BASH命令行基本操作
- MYSQL命令行基本操作
- BASH命令行基本操作
- mysql 命令行基本操作
- HBase命令行基本操作
- BASH命令行基本操作
- Linux命令行基本操作
- 磁盘阵列命令行基本操作
- SVN命令行基本操作
- git 命令行基本操作
- Sqlite命令行基本操作
- Git命令行基本操作
- 1152_点菜问题
- css中的flex用法
- js知识点整理
- 第一范式,第二范式,第三范式
- 程序进入后台后可以运行时间的调整-----长期在后台运行
- Hadoop命令行基本操作
- USACO1.4 等差数列 Arithmetic Progressions
- html5和html4的区别
- 关于计算时间和文件大小的函数
- HDU 3593The most powerful force 树状dp
- 使用keil调试stm32时不能run
- sql_mode=only_full_group_by研读
- ARC下OC对象和CF对象之间的桥接(bridge)
- (函数题)4-5 求自定类型元素的最大值