20170308技术积累

来源:互联网 发布:vb 图片放大 编辑:程序博客网 时间:2024/06/15 23:52

1.127.*.*.  是回环地址(loopbackaddress),用来测试本地网络协议,能ping通说明本地网卡和IP协议安装都没有问题。比如127.0.0.1  127.127.1.0等

2.not Serving RegionException.  出现这种异常,很可能是正在运行一个进程操作hbase数据库时,进程被杀掉或者hbase服务被停掉引起的。解决方案:查看hbase日志文件,发现某些日志文件异常(应该在WALS的文件夹内),先将该日志目录下的错误文件移出(或者全部移出),然后再移回WALS中。CDH中日志目录为/data1/var/log/  在log目录下又有各个组件的日志。

3.standalone集群和yarn集群都是集群管理模式,都是master/slave模式,local可以理解为单机模式

4.sc.textFile("hdfs://ip:8020/user/input")  //从hdfs的文件系统中读取
   sc.textFile("file:///home/input")         //从本地文件系统中读取

0 0
原创粉丝点击