20170308技术积累
来源:互联网 发布:vb 图片放大 编辑:程序博客网 时间:2024/06/15 23:52
1.127.*.*. 是回环地址(loopbackaddress),用来测试本地网络协议,能ping通说明本地网卡和IP协议安装都没有问题。比如127.0.0.1 127.127.1.0等
2.not Serving RegionException. 出现这种异常,很可能是正在运行一个进程操作hbase数据库时,进程被杀掉或者hbase服务被停掉引起的。解决方案:查看hbase日志文件,发现某些日志文件异常(应该在WALS的文件夹内),先将该日志目录下的错误文件移出(或者全部移出),然后再移回WALS中。CDH中日志目录为/data1/var/log/ 在log目录下又有各个组件的日志。
3.standalone集群和yarn集群都是集群管理模式,都是master/slave模式,local可以理解为单机模式
4.sc.textFile("hdfs://ip:8020/user/input") //从hdfs的文件系统中读取
sc.textFile("file:///home/input") //从本地文件系统中读取
0 0