使用shell操作HDFS
来源:互联网 发布:淘宝宝贝选项设置 编辑:程序博客网 时间:2024/05/18 02:51
前提是都已经配置好了,可以参考hadoop伪分布安装:http://blog.csdn.net/jerome_s/article/details/25788967
linux的文件系统与hdfs的关系类似于widnows与虚拟机的关系
hadoop fs 回车,即可看到所有的操作;
hadoop fs -help ls 查看某个命令的具体操作;
HDFS fs命令
-help [cmd] //显示命令的帮助信息
-ls(r) <path> //显示当前目录下所有文件
-du(s) <path> //显示目录中所有文件大小
-count[-q] <path> //显示目录中文件数量
-mv <src> <dst> //移动多个文件到目标目录
-cp <src> <dst> //复制多个文件到目标目录
-rm(r) //删除文件(夹)
-put <localsrc> <dst> //本地文件复制到hdfs
-copyFromLocal //同put
-moveFromLocal //从本地文件移动到hdfs
-get [-ignoreCrc] <src> <localdst> //复制文件到本地,可以忽略crc校验
-getmerge <src> <localdst> //将源目录中的所有文件排序合并到一个文件中
-cat <src> //在终端显示文件内容
-text <src> //在终端显示文件内容
-copyToLocal [-ignoreCrc] <src> <localdst> //复制到本地
-moveToLocal <src> <localdst>
-mkdir <path> //创建文件夹
-touchz <path> //创建一个空文件
实际操作:
对hdfs的操作方式:hadoop fs xxx
hadoop fs -ls / 查看hdfs的根目录下的内容的
hadoop fs -lsr / 递归查看hdfs的根目录下的内容的
hadoop fs -mkdir /d1 在hdfs上创建文件夹d1
hadoop fs -put <linux source> <hdfs destination> 把数据从linux上传到hdfs的特定路径中
hadoop fs -get <hdfs source> <linux destination> 把数据从hdfs下载到linux的特定路径下
hadoop fs -text <hdfs文件> 查看hdfs中的文件
hadoop fs -rm 删除hdfs中文件
hadoop fs -rmr 删除hdfs中的文件夹
hadoop fs -ls hdfs://hadoop:9000/
0 0
- 使用shell操作HDFS
- HDFS中的shell操作
- HDFS SHELL 操作
- hdfs shell操作大全
- hdfs-shell操作
- HDFS的shell操作
- HDFS的shell操作
- Hdfs shell命令操作
- hdfs的shell操作
- HDFS Shell 操作
- hdfs的shell操作
- shell 命令操作hdfs
- HDFS-2.hdfs shell操作help文档
- HDFS一 HDFS的shell操作
- Hadoop hdfs Shell命令 HDFS操作命令
- HDFS Shell基本操作总结
- HDFS体系结构及shell操作
- HDFS的基本shell操作
- 小议C#错误调试和异常处理
- java正则表达式
- uva 11270 - Tiling Dominoes(插头dp)
- DW快捷键记录
- Spring 依賴注入門示例
- 使用shell操作HDFS
- 淘宝校招笔试题
- zipper
- 12周 长颈鹿类对动物类的继承 private继承方式下
- How does LGWR/LNS process work in 10gR2 using LGWR ASYNC (文档 ID 1057898.1)
- 6.6 引用与指针的比较
- 12周 长颈鹿类对动物类的继承 protect继承方式下
- Android 通知栏Notification的整合 全面学习 (一个DEMO让你完全了解它)
- 开关抖动延时