solrCloud+tomcat+zookeeper配置----参考二

一.zookeeper

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

36

37

38

39

40

41

42

43

44

45

46

47

48

49

50

51

52

53

54

55

56

57

58

59

60

61

62

63

64

65

66

67

68

69

70

71

72

73

74

75

76

77

78

79

80

81

82

83

84

85

86

87

88

89

90

现有4台机器 10.14.2.201 10.14.2.202 10.14.2.203 10.14.2.204

安装zookeeper集群

  

在所有机器上进行

1、下载安装包解压

 tar xvf zookeeper-3.4.5.tar.gz  -C /export/

 cd /export/

 ln -s zookeeper-3.4.5 zookeeper

 

2、设置环境变量

 vim /etc/profile

#Set ZooKeeper Enviroment

export ZOOKEEPER_HOME=/export/zookeeper

export PATH=$PATH:$ZOOKEEPER_HOME/bin

 

3、加载环境变量

 source   /etc/profile

4、配置zookeeper

cd /export/zookeeper/conf

cp zoo_sample.cfg  zoo.cfg

vim zoo.cfg

 

tickTime=2000

initLimit=10

syncLimit=5

dataDir=/export/zookeeper/data

dataLogDir=/export/zookeeper/log

clientPort=2181

server.1=10.14.2.201:2888:3888

server.2=10.14.2.202:2888:3888

server.3=10.14.2.203:2888:3888

server.4=10.14.2.204:2888:3888

 

5、dataDir和日志目录dataLogDir

mkdir -p /export/zookeeper/data

mkdir -p /export/zookeeper/log

 

6、在10.14.2.201上

在dataDir目录下创建myid文件

echo 1 > /export/zookeeper/data/myid

 

myid中的数字与zoo.cfg中的"server.数字=ip或者域名:port1:port2"相对应，

配置文件中10.14.2.201对应的server.数字是1 所以myid的数字应为1

 

7、在10.14.2.202上

在dataDir目录下创建myid文件

echo 2 > /export/zookeeper/data/myid

 

8、在10.14.2.203上

在dataDir目录下创建myid文件

echo 3 > /export/zookeeper/data/myid

 

9、在10.14.2.204上

在dataDir目录下创建myid文件

echo 4 > /export/zookeeper/data/myid

 

在所用机器上执行

10、修改权限

chown hadoop.hadoop -R /export/zookeeper/

chown hadoop.hadoop -R /export/zookeeper

 

11、启动zookeeper

/export/zookeeper/bin/zkServer.sh start

 

12、观察zookeeper状态

   1> 10.14.2.201

   # /export/zookeeper/bin/zkServer.sh status

   JMX enabled by default

   Using config: /export/zookeeper/bin/../conf/zoo.cfg

   Mode: follower

 

   2> 10.14.2.202

   # /export/zookeeper/bin/zkServer.sh status

   JMX enabled by default

   Using config: /export/zookeeper/bin/../conf/zoo.cfg

   Mode: follower

  

   3> 10.14.2.203

   # /export/zookeeper/bin/zkServer.sh status

  JMX enabled by default

  Using config: /export/zookeeper/bin/../conf/zoo.cfg

  Mode: leader

  

   4> 10.14.2.204

   # /export/zookeeper/bin/zkServer.sh status

   JMX enabled by default

   Using config: /export/zookeeper/bin/../conf/zoo.cfg

   Mode: follower

    

13、此时zookeeper已安装并启动完毕

　　

二.solrCloud

1.安装tomcat，配置端口。部署solr.war，将solr\example\lib\ext下的jar拷贝到solr\WEB-INF\lib下。

2.创建

/home/solr/solrcloud

/home/solr/solrcloud/config-files (放置solr\example\solr\collection1\conf 下的所有文件)

/home/solr/solrcloud/solr-lib (放置solr\WEB-INF\lib下的所有jar包)

3.配置中文分词器

4.创建solr数据目录

/home/solr/solr-cores

生成solr.xml，如下：

<?xml version="1.0" encoding="UTF-8" ?><solr persistent="true"><logging enabled="true"><watcher size="100" threshold="INFO" /></logging><cores defaultCoreName="collection1" adminPath="/admin/cores" host="${host:}" hostPort="8080" hostContext="${hostContext:solr}" zkClientTimeout="${zkClientTimeout:15000}"></cores></solr>

5.创建

tomcat/conf/Catalina

tomcat/conf/Catalina/localhost

并创建solr.xml

<?xml version="1.0" encoding="UTF-8"?><Context docBase="/soft/apache-tomcat-7.0.37/webapps/solr" debug="0" crossContext="true"><Environment name="solr/home" type="java.lang.String" value="/home/solr/solr-cores" override="true"/></Context>

docBase根据实际情况配置；

solr/home为之前创建的目录：/home/solr/solr-cores

6.修改tomcat/bin/cataina.sh 文件，在最上方加入：JAVA_OPTS="-DzkHost=master:2181,slave1:2181,slave2:2181"，或直接使用ip。

将以上配置发布到集群其他机器上。

7.SolrCloud是通过ZooKeeper集群来保证配置文件的变更及时同步到各个节点上，所以，需要将配置文件上传到ZooKeeper集群中。执行如下操作：

java -classpath .:/home/solr/solrcloud/solr-lib/* org.apache.solr.cloud.ZkCLI -cmd upconfig -zkhost 192.168.91.128:2181,192.168.91.129:2181,192.168.91.130:2181 -confdir /home/solr/solrcloud/config-files/ -confname myconf  

-cmd upconfig:上传配置文件

-confdir:配置文件的目录

-confname:指定对应的名称

java -classpath .:/home/solr/solrcloud/solr-lib/* org.apache.solr.cloud.ZkCLI -cmd linkconfig -collection collection1 -confname myconf -zkhost 192.168.91.128:2181,192.168.91.129:2181,192.168.91.130:2181

-cmd linkconfig:为指定collection"绑定"配置文件

-collection

-confname

8.检查zookeeper的配置信息

zkCli.sh -server ip:port

ls /configs/myconf

ls /live_nodes

9.启动tomcat，创建collection

curl 'http://192.168.91.128:8080/solr/admin/collections?action=CREATE&name=mycollection&numShards=3&replicationFactor=1'

action：CREATE

name：collection名称

numShards：分片数量

replicationFactor：副本集数量

也可以通过zk查询collection的情况：ls /collections/mycollection