cygwin配置hadoop问题笔记
来源:互联网 发布:淘宝客服计划书 编辑:程序博客网 时间:2024/05/04 10:25
1、配置完成后,执行wordcount实例报错,日志如下
java.io.FileNotFoundException: File D:/tmp/hadoop-SYSTEM/mapred/local/taskTracker/jobcache/job_201207051857_0001/attempt_201207051857_0001_m_000003_2/work/tmp does not exist.
at org.apache.hadoop.fs.RawLocalFileSystem.getFileStatus(RawLocalFileSystem.java:361)
at org.apache.hadoop.fs.FilterFileSystem.getFileStatus(FilterFileSystem.java:245)
at org.apache.hadoop.mapred.TaskRunner.setupWorkDir(TaskRunner.java:519)
at org.apache.hadoop.mapred.Child.main(Child.java:155)
解决方法:
将配置文件中路径改为绝对路径
<property>
<name>mapred.child.tmp</name>
<value>D:\tmp</value>
</property>
2、
安装hadoop-0.20.203.0rc1有bug,换0.20.0后由于之前版本tmp数据没删干净
启动报错,datanode为0,导致namenode和mapred都有错误日志
解决方法:
删除D:/tmp/hadoop-SYSTEM/dfs/data hadoop-SYSTEM在cygwin中看不到,在D盘根目录的tmp中可看到
- cygwin配置hadoop问题笔记
- cygwin +hadoop配置问题简要汇总
- cygwin hadoop 配置
- CygWin 为Hadoop配置Java_Home
- 配置cygwin构建hadoop环境
- windows和cygwin下hadoop安装配置
- Hadoop在Cygwin下的JDK配置
- 用cygwin实现hadoop 全分布配置
- Cygwin上配置Hadoop的Java_home
- windows和cygwin下hadoop安装配置
- jvm+windows+cygwin+eclipse+hadoop配置篇
- Windows下安装Cygwin配置Hadoop集群
- cygwin 安装配置ssh 问题
- cygwin 安装配置ssh 问题
- hadoop+cygwin
- cygwin下安装和配置ssh笔记
- Cygwin下配置expect遇到的问题
- Cygwin下Hadoop的安装与配置详解
- xcode 决断设备类型
- 轻松掌握ISO8583报文协议
- Solr 的DIH组件 使用delta_import时 父子关系的entity 最后修改时间问题
- NSJSONSerialization介绍
- 云投资回报(ROI),通过四个方面来寻求回报
- cygwin配置hadoop问题笔记
- switch语句要注意几点
- android编译过程详解(三)
- PowerPoint 使用Ribbon Xml改写Ribbon按钮的动作
- eclipse里面跑Hadoop
- 航空公司的CEO表示CIO如果可以在三个月之内实现投资回报就可以得到无限制的预算
- 虚拟机文件夹共享
- Android 2.0以后的Contacts API--ContactsContract
- jbpm——api介绍