CloudSuite之Graph Analytics集群安装
来源:互联网 发布:虚拟商品自动发货源码 编辑:程序博客网 时间:2024/05/22 02:36
官方安装文档:
https://github.com/dato-code/PowerGraph/blob/master/TUTORIALS.md#cluster
操作系统:centos6.5 64
1. 首先在一个节点上安装graphlab,我的安装路径为/home/liulan/software/
2. 安装依赖软件gcc, c++, git, make, cmake, openmpi, autoconf, automake...使用yum安装即可。注意openmpi每个节点的路径要一致。
3. 下载软件,并运行configure:
git clone https://github.com/graphlab-code/graphlab.gitcd graphlab./configure
4. 选择要安装的toolkit编译,我编译的是graph_analytics,执行以下命令:
cd release/toolkits/graph_analyticsmake -j4到这儿的时候出错了,错误如下:
这一段是同学给帮忙解决的,两个人都要哭了。。
好像是因为不能生成共享的动态库,不太明白。具体方法是把hadoop下makefile文件的LDFLAGS内容改一下,如下:
最后看到生成的亮亮的绿色文件简直要哭了。。
(PS:.so为动态链接库,.a静态链接库)
5. 接下来开始部署分布式环境,当前主目录下建立machines文件,并写入每个节点的ip地址,每个ip之间回车隔开;
10.1.1.10310.1.1.10110.1.1.105
6. 确保每台机器上相同目录下都有这个文件;
7. 设置每台机器之间相互ssh免密码登录,我用的办法好像有点诡异,不过很简单:将master节点上的.ssh文件夹拷贝到其他机器上,然后将每个节点的.ssh/id_rsa文件权限改为600,具体的方法之前的文章有提到过;
8. 在安装graphlab(master)节点上执行以下命令以将GraphLab文件拷贝到所有机器上:
cd /home/liulan/software/graphlab/release/toolkits<pre name="code" class="plain">/home/liulan/software/<span style="font-family: Arial, Helvetica, sans-serif;">graphlab/scripts/mpirsync</span>
/home/liulan/software/<span style="font-family: Arial, Helvetica, sans-serif;">graphlab/deps/local</span>
/home/liulan/software/<span style="font-family: Arial, Helvetica, sans-serif;">graphlab/scripts/mpirsync</span>我的openmpi可能没配置好吧,需要修改mpirsync文件:
运行mpirsync之后发现rsync没有装,于是又把rsync配置好,网上资料很多;
之后这一步应该就能成功通过了吧;
hadoop就先不配置了,过程也很简单,这会儿可以自己跑跑自带的程序试试了;
网上的中文安装文档:http://blog.csdn.net/zongzhou1234/article/details/39972495
- CloudSuite之Graph Analytics集群安装
- CloudSuite之Web Search Benchmark环境搭建
- GPS-Graph Processing System集群安装笔记(一)
- The Intersection of Large-Scale Graph Analytics and Deep Learning
- 集群之 -- zookeeper 集群安装及配置
- Hadoop集群之hive安装
- Redis之集群安装-yellowcong
- Solr之集群安装-yellowcong
- CloudSuite环境搭建
- Cloudsuite WebServing deployement
- Cloudsuite套件使用方法
- 完全分布式hadoop集群安装之三:hadoop集群配置
- SAS Visual Analytics(VA)安装教程
- 软件安装之arcsde10.0集群
- Hadoop学习之zookeeper(集群安装)
- HBase集群配置之Zookeeper安装配置
- NOSQL 之 cassadra 安装与集群配置
- zookeeper+kafka集群安装之二
- Calendar类的使用
- NodeJS操作文件相关总结
- JAVA中Action层, Service层 ,modle层 和 Dao层的功能区分
- 单片机与组态王通信协议
- C++重载复合赋值运算符、算术运算符和关系运算符
- CloudSuite之Graph Analytics集群安装
- Flume几种监控方式
- test-01
- iOS完整学习路线图
- 组态王与单片机协议2
- 随意细解:OC -- 类的扩展
- 关于app启动动画如何做到第一次启动采用图片轮播,以后启动都只有1张图片的解决方案
- Hibernate中两种获取Session的方式
- leetcode-Two Sum