装电脑小结

来源:互联网 发布:淘宝四钻店铺转让 编辑:程序博客网 时间:2024/04/30 15:28

花了2个晚上把自己的笔记本装成了ubuntu 调通了hadoop真是好激动,都不舍得关机了。




--------------------------- 装linux 选了ubuntu
其实还是稀里糊涂的,不过有几点似乎是必须要做的
1)window系统上使用分盘工具,把win系统不在的盘分一下
2)刻录一个可以启动的ubuntu系统盘 (第一次知道原来 系统盘和一般U盘是不同的)
准备好以上2点,就可以插上U盘重新启动计算机,然后在开机时按F12之类的,总之进入可以选择从U盘启动的界面,回车,接下来就是根据ubuntu安装的提示确认即可。
装完以后更新一下:
apt-get update  #更新系统
apt-get upgrade #更新软件包




--------------------------- 装hadoop 中遇到的问题
问题1:启动yarn的时候 提示输入 root@localhost的密码,但是怎么都访问禁止的问题。
百度了很久,根据提示改了很多地方,不知道哪里是关键步骤,所以按照顺序罗列了下
1)手动安装ssh 服务: sudo apt-get install ssh
通过输入 ps -e|grep ssh 来确认是不是启动了ssh服务
2)直接修改 /etc/hostname 里面的文本,然后重启计算机,开机的名称改成了localhost 
sudo -i 以后也变成 root@localhost 但是 ssh localhost还是访问拒绝的
3)修改 /etc/hosts 里面的ip列表
第一行是 localhost不动,第二行也有自动生成的 ip和对应的初始的ip名称,这个第二行改成其他名字也不影响的样子
3)修改/etc/ssh/sshd_config 里面 permitrootlogin without-password改成 permitrootlogin yes
这个修改完成后,问题解决了!


问题2:执行测试的hadoop jar pi 时,发现卡在running job不能进行下去
解决的方法是,排查一遍hadoop配置文件的每个书写是否正确,对照后,发现是yarn-site.xml里面一个拼写错误,修正后,bug消除。


问题3:datanode总是启动不起来
解决方法 参考: http://blog.csdn.net/zhangt85/article/details/42078347
根据日志中的路径,cd /home/hadoop/tmp/dfs
能看到 data和name两个文件夹,将name/current下的VERSION中的clusterID复制到data/current下的VERSION中,覆盖掉原来的clusterID

让两个保持一致 然后重启,启动后执行jps,查看进程


问题4:用jps检查进程时发现没有secondary namenode

解决方法:(也不算是解决)使用sbin/start-all.sh的时候可以启出secondarynamenode

但是逐步手动启动每个模块就会不出现secondary namenode 不知道为什么


--------------------------- 在ubuntu上安装eclipse

1)下载eclipse-jee-neon-2-linux-gtk-x86_64.tar.gz 解压缩 tar zxvf 

2)下载jdk :jdk-8u121-linux-x64.tar.gz 解压缩

3)解压缩jdk以后打开文件夹,将其中的jre文件夹整个复制,黏贴到解压缩eclipse文件夹下 

# 就可以成功启动eclipse了 



0 0
原创粉丝点击