大数据 (九)Hadoop-使用eclipe插件操作HDFS
来源:互联网 发布:win10网络时间同步 编辑:程序博客网 时间:2024/06/08 18:29
通过之前对HDFS、MapReduce的学习,我们了解到Hadoop也是需要编程的。那么使用java的我就产生了一个需求,在eclipse中对hadoop数据进行上传下载,以便于为进行测试。
一、下载插件包
我这里使用的是eclipse luna版本,在网上下载eclipse相应插件包。我下的是hadoop-eclipse-plugin-2.5.1.jar。如下图
二、安装插件
将这个插件包拷贝至eclipse安装目录的plugin目录下,启动eclipse
三、配置 使用插件
eclipse打开后点击菜单 window--show view --others,会看到多出如下选项则说明插件安装成功
双击后,出现下图的框
点击后,如下图所示
配置完成后,点击Finished。之后我们会看见如下结果
点击Map Reduce视图后,会看见左侧Project Explorer多出如下。
但是我们发现,我们打不开,那是因为我们在windows上登录hadoop默认是被拒绝的,只需要在hadoop安装目录下/etc/hdoop/hdfs-site.xml文件中加入如下配置即可
<property> <name>dfs.permissions</name> <value>false</value> </property>注意要将这个配置更新至hadoop各个节点主机中,之后重启hadoop。
接下来再次双击打开DFS Locations会看到如下结果
阅读全文
0 0
- 大数据 (九)Hadoop-使用eclipe插件操作HDFS
- 大数据 (六)Hadoop-HDFS Federation
- hadoop入门九(HDFS基本原理和操作)
- 大数据之hadoop【hdfs】
- 大数据学习篇:hadoop深入浅出系列之HDFS(四)——shell操作
- 大数据学习篇:hadoop深入浅出系列之HDFS(六) ——JavaAPI操作
- 大数据 (五)Hadoop-HDFS zookeeper和Hadoop-HDFS的集成
- 大数据框架hadoop的文件系统(HDFS)命令大全
- 大数据(四)Hadoop-HDFS zookeeper的安装
- 大数据Hadoop之HDFS和MapReduce_02_01
- 关于python使用hadoop(使用python操作hdfs)
- 大数据学习篇:hadoop深入浅出系列之HDFS(二)——HDFS体系结构
- 大数据生态系统基础:Hadoop(三):Hadoop 3.0.0 HDFS 体系结构
- 大数据生态系统基础:Hadoop(四):Hadoop 3.0.0 HDFS SHELL 命令
- 大数据生态系统基础:Hadoop(五):Hadoop 3.0.0 HDFS读写及编程基础
- 大数据时代之hadoop(四):hadoop 分布式文件系统(HDFS)
- 大数据时代之hadoop(四):hadoop 分布式文件系统(HDFS)
- 大数据层--HDFS基本操作
- 计蒜客 踩蚂蚁(优先队列)
- 7、集合
- 1101. Quick Sort (25)快排
- A
- 机器学习第三周(三)--正则化
- 大数据 (九)Hadoop-使用eclipe插件操作HDFS
- UVA12338Anti-Rhyme Pairs(哈希+二分最长前缀)
- hdu6063RXD and math(快速幂找规律)
- python random和numpy random
- 微信支付接口升级,微信支付免充值代金券开通
- C++学习之容器<vector>
- 南阳oj 题目57 6174问题
- Linux server 中手动配网命令
- hdu 6058