1.2 使用Hadoop shell命令导入和导出数据到HDFS
来源:互联网 发布:python agent开发 编辑:程序博客网 时间:2024/06/10 04:06
1.2 使用Hadoop shell命令导入和导出数据到HDFS
实验准备
实例需要用到的数据-weblog_entries.txt
在namenode创建2个文件夹用来存放实验用的数据
mkdir /home/data
mkdir /home/data_download
将weblog_entries.txt上传到namenode里的/home/data文件夹(我使用SecureFXPortable.exe 工具)
注:以下命令都是在namenode节点运行的
实验过程
1.在HDFS中创建一个新的文件夹,用于保存weblog_entries.txt
hadoop fs -mkdir /data/weblogs
2.将weblog_entries.txt文件从本地文件系统复制到HDFS刚创建的新文件夹下
cd /home/data
hadoop fs -copyFromLocal weblog_entries.txt /data/weblogs
3.列出HDFS上weblog_entries.txt文件的信息:
hadoop fs –ls /data/weblogs/weblog_entries.txt
4.将HDFS上的weblog_entries.txt文件复制到本地系统的当前文件夹下
cd /home/data_download
hadoop fs -copyToLocal /data/weblogs/weblog_entries.txt ./weblog_entries.txt
最后用 ls 命令检验下时候将weblog_entries.txt 下载到本地
0 0
- 1.2 使用Hadoop shell命令导入和导出数据到HDFS
- 使用HDFS和HBASE导出导入功能进行数据迁移
- Hadoop数据工具sqoop,导入HDFS,HIVE,HBASE,导出到oracle
- Hadoop HDFS Shell 命令
- [Hadoop]HDFS shell命令
- Hadoop HDFS Shell命令
- Hadoop HDFS Shell命令
- hadoop-hdfs-shell命令
- [Hadoop]HDFS shell命令
- Oracle--oracle导出表结构到sql文件 ,数据库的导入导出CMD命令exp和imp、使用数据泵导入(impdp)和导出(expdp)
- Hadoop hdfs Shell命令 HDFS操作命令
- 使用shell将hdfs上的数据导入到hive表中
- Sqoop2 从MySQL导入数据到Hadoop HDFS
- hadoop HDFS 常用shell命令
- Hadoop-HDFS 常用shell命令
- 通过Hadoop Shell命令进行导入导出操作
- Hadoop Shell命令 |HDFS Shell命令| HDFS 命令
- Hadoop Shell命令 |HDFS Shell命令| HDFS 命令
- 内存分析工具 MAT 的使用
- poj 2773 Happy 2006 容斥原理+筛素数+二分
- IOS GPS(定位城市)
- java运行时异常与一般异常有何异同?
- Navicat导出sql文件再导入出错
- 1.2 使用Hadoop shell命令导入和导出数据到HDFS
- 测板子功耗
- RSA解密java加密串
- onContextItemSelected 与 onMenuItemSelected 的那些事
- redis集群实战
- Xcode出现警告:Terminating app due to uncaught exception 'NSUnknownKeyException'的解决方法
- 升级Xcode7.1 网络问题
- linux互斥锁操作
- wincmd.ini for windows