eclipse 通过插件向hdfs上传文件遇到一个很坑的问题
来源:互联网 发布:mac 强制退出 编辑:程序博客网 时间:2024/06/10 17:06
这个问题害我纠结了一天,具体情况是这样的,我通过eclipse for hadoop 插件向master hdfs主机上传文件,然后做一个测试。 至于环境搭建和怎么配置插件我这里就不着重讲了,我通过插件连接上了master的hdfs,我再上面新建文件夹,后面我把一个测试文件通过插件进行上传,发现上传到hdfs上的文件大小仅为0kb,我勒个去甚是郁闷啊!!! 各种百度,修改配置文件试了很多次发现问题依旧如此,后来无意间我发现之前装过其他版本的hadoop,尼玛,终于搞懂了。
这是我eclipse上传到hdfs文件状态 大小为0kb
接下来列举下解决问题得步骤:
1.查看hdfs-site.xml,已经设置hdfs的访问控制设为false.
2.查看hdfs的文件目录权限:
已执行:
bin/Hadoop fs -chmod 777
3.修改windows本地帐户
4.检查hdfs能否本地上传
bin/hadoop fs -put Test_1 /home/hadoop/in
可以上传
5.检查eclipse的配置端口:
和core-site.xml的一致:
做完以上5个步骤,问题依然没有解决。发现不同的方式上传的文件属性不同
不知道是什么原因?
6.检查seLinux是否禁用(这步请谨慎修改,修改了很可能造成linux启动不起来,我这步没有做)
禁用selinux
编辑 "/etc/selinux/config"文件,设置"SELINUX=disabled"
最后:
在root权限下:
关闭防火墙:
/sbin/service iptables stop 关闭防火墙这步很关键 记得关闭集群中所有机器防火墙~~~~
重启 reboot
- eclipse 通过插件向hdfs上传文件遇到一个很坑的问题
- 关于通过Eclipse上传文件到HDFS文件为空的问题
- windows环境下通过Eclipse下载hdfs中的文件中遇到的问题
- 上传到HDFS上的文件遇到乱码问题
- webupload文件上传过程中遇到的一个问题
- GitHub基础学习-使用eclipse的EGit插件向GitHub上传项目文件的方法
- 文件上传遇到的问题
- 通过SSH向安装在虚拟机上的centOS 上传文件出现的问题及解决方法
- Eclipse通过Maven插件创建webapp项目中遇到的问题
- Eclipse 上传 删除 下载 分析 hdfs 上的文件
- eclipse安装CDT插件遇到的问题
- Eclipse git 插件使用遇到的问题
- eclipse安装CDT插件遇到的问题
- eclipse安装hadoop插件,HDFS中没有输出的问题。
- ubuntu 下向Bitbucket上传代码遇到的问题
- 通过Eclipse插件启动Tomcat的问题
- 通过Eclipse插件启动Tomcat的问题
- 上传wmv文件遇到的问题
- 利用泛型对Java List对象求最大值
- 【C语言】【unix c】如何将当前目录添加到环境变量
- Squid配置
- JAVA发送手机短信,httpclient短信发送接口示例(java)
- Map(接口简介、HashMap集合、TreeMap集合、Properties、泛型、Collections工具类、Arrays工具类)
- eclipse 通过插件向hdfs上传文件遇到一个很坑的问题
- vsftpd服务配置
- <C语言>函数作实参传递给另一函数
- aspectjweaver.jar && aspectjrt.jar
- DH密钥交换和ECDH原理
- Linux学习笔记(四)------常见的dos命令创建目录,链接等
- 第十三天
- Linux虚拟内存设置
- Android7.0特性总结