初学hadoop之linux系统操作的hdfs的常用命令
来源:互联网 发布:java微信公众号开发pdf 编辑:程序博客网 时间:2024/05/23 16:45
1.在对linux的一般操作有 ls mikdir rmdir vi 等操作
在对hadoop的hdfs的一般操作语法为hadoop fs -ls / /**表示查看Hadoop跟目录文件**/
hadoop fs -lsr / /***递归查看hadoop的文件目录**/
hadoop fs -mkdir /dl /**表示在hdfs的根目录下创建了一个的d1的文件夹**/e
hadoop的hdfs一般创建文件操作很少,在linux上传较多
语法为:
hadoop fs -put linux文件路径(也是要上传文件的路径) 空格 hadoop的hdfs的路径
例如,把linux下root下install.log文件上传的hadoop的hdfs的d1目录下
命令操作位
hadoop fs -put /root/install.log /d1
在上传文件时注意:
当你上传文件到hadoop的hdfs文件目录不存在的时候,hdfs会将你上传的文件名改为该文件
夹的名称t
hdfs上传文件如果存在会提示,可以该文件名上传
下载操作就是把-put 换成-get,源文件路径,目的地路径,此时原文件为hdfs了,目的地
是linux了,语法与-put一样,只是原文和目的地互换了i1
hdfs 查看文件语法
hadoop fs -text /d1/adc 此语句的意思是查看hdfs的根目录下的d1文件夹下的abc文件
hdfs 删除文件
hadoop fs -rm /d1/adc 此语句的意思是删除hdfs的根目录下的d1文件夹下的abc文件
hdfs 删除文件夹
hadoop fs -rmr /d1 此语句的意思是删除hdfs的根目录下的d1文件夹下的所有文件
hdfs帮助文档
hadoop fs
hadoop fs -help 命令
注意,hadoop fs -ls 没有接路径的话就会报错,如果有默认路径/user/root root指当前用户
就不会报错了
完整写法
hadoop fs -ls hdfs://主机名:端口号
NameNode
namenode存放信息在源码的hdfs-default.xml里面有详细的说明,把起拷贝的core-site.XML中
<name>hadoop.tmp.dir</name>的value/dfs/name/current/fsimage指定
namenode存放在linux的路径
DataNode
datanode存放信息在源码的hdfs-default.xml里面有详细的说明,把起拷贝的core-site.XML中
<name>hadoop.tmp.dir</name>的value/dfs/data/currentssss指定
datanode存放在linux的路径
在对hadoop的hdfs的一般操作语法为hadoop fs -ls / /**表示查看Hadoop跟目录文件**/
hadoop fs -lsr / /***递归查看hadoop的文件目录**/
hadoop fs -mkdir /dl /**表示在hdfs的根目录下创建了一个的d1的文件夹**/e
hadoop的hdfs一般创建文件操作很少,在linux上传较多
语法为:
hadoop fs -put linux文件路径(也是要上传文件的路径) 空格 hadoop的hdfs的路径
例如,把linux下root下install.log文件上传的hadoop的hdfs的d1目录下
命令操作位
hadoop fs -put /root/install.log /d1
在上传文件时注意:
当你上传文件到hadoop的hdfs文件目录不存在的时候,hdfs会将你上传的文件名改为该文件
夹的名称t
hdfs上传文件如果存在会提示,可以该文件名上传
下载操作就是把-put 换成-get,源文件路径,目的地路径,此时原文件为hdfs了,目的地
是linux了,语法与-put一样,只是原文和目的地互换了i1
hdfs 查看文件语法
hadoop fs -text /d1/adc 此语句的意思是查看hdfs的根目录下的d1文件夹下的abc文件
hdfs 删除文件
hadoop fs -rm /d1/adc 此语句的意思是删除hdfs的根目录下的d1文件夹下的abc文件
hdfs 删除文件夹
hadoop fs -rmr /d1 此语句的意思是删除hdfs的根目录下的d1文件夹下的所有文件
hdfs帮助文档
hadoop fs
hadoop fs -help 命令
注意,hadoop fs -ls 没有接路径的话就会报错,如果有默认路径/user/root root指当前用户
就不会报错了
完整写法
hadoop fs -ls hdfs://主机名:端口号
NameNode
namenode存放信息在源码的hdfs-default.xml里面有详细的说明,把起拷贝的core-site.XML中
<name>hadoop.tmp.dir</name>的value/dfs/name/current/fsimage指定
namenode存放在linux的路径
DataNode
datanode存放信息在源码的hdfs-default.xml里面有详细的说明,把起拷贝的core-site.XML中
<name>hadoop.tmp.dir</name>的value/dfs/data/currentssss指定
datanode存放在linux的路径
1 0
- 初学hadoop之linux系统操作的hdfs的常用命令
- Hadoop 之 hdfs的常用命令
- hadoop的hdfs文件常用命令操作
- Hadoop之HDFS的操作
- hadoop hdfs 的常用命令
- 初学Hadoop之HDFS
- Hadoop中HDFS的常用命令
- hadoop的HDFS操作
- Hadoop框架之HDFS的shell操作
- Hadoop框架之HDFS的shell操作
- hadoop之hdfs的shell命令操作
- Hadoop学习之HDFS的相关操作
- 【Hadoop】之 熟悉常用的HDFS操作
- Hadoop之HDFS的简单介绍及常用命令
- hdfs文件的操作常用命令
- hadoop的hdfs相关的常用命令总结
- hadoop hdfs的一些操作
- hadoop hdfs的一些操作
- linux shell 读取配置文件
- js-基础
- 当游戏产业迎面遇上移动互联网浪潮 ——写在虚幻引擎4、CryEngine降低门槛的开放之日
- 创建多sarfari类似的多标签页面
- 转载:Git SSH Key 生成步骤
- 初学hadoop之linux系统操作的hdfs的常用命令
- web开发中添加分享按钮(有分享次数)
- dll创建中,遇到WARN:inconsistent dll linkage. dllexport assumed.
- Win7中自带截图工具
- Datamatrix二维码开源解码库libdmtx
- USACO1.2.2 - transform
- 正则表达式的贪婪与非贪婪
- 数组作数据成员(拓展2)
- 一身黑色超短裙亮相的全智贤空降上海代言