学习mangodb的资料

来源:互联网 发布:怎么用excel分析数据 编辑:程序博客网 时间:2024/05/16 23:55

MongoDB实现复制集

http://blog.csdn.net/liuguangrong/article/details/52301790

MongoDB实现分片复制集

http://blog.csdn.net/liuguangrong/article/details/52383953


mongodb 3.4 集群搭建升级版 五台集群 <另一个例子,还没看>

http://www.ityouknow.com/mongodb/2017/08/16/install-mongodb-cluster.html

mongodb replica set shard 分片 高可用 集群 <例子,还没看>

http://blog.51yip.com/nosql/1647.html


【MongoDB总结】写给想学习MongoDB的小伙伴们

http://blog.csdn.net/sxb0841901116/article/category/2549001


Elasticsearch+Mongodb 用mongo-connector 实时更新

http://blog.csdn.net/u010167215/article/details/50504975



》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》

mongodb:3.4

es:5.6.0

下面步骤试验过ok

Windows搭建MongoDB分片以及复制集:

http://blog.csdn.net/zlp1992/article/details/77053462

原作者原创 2017年08月10日 15:26:20


本文主要介绍如何在windows部署MongoDB的复制集以及分片,在搭建过程中主要参考了http://blog.csdn.net/sxb0841901116/article/category/2549001对MongoDB分片和复制集的介绍与搭建,但自己在搭建过程中又碰到了一些问题,因此记录一下。

自己是在一台window机器部署整套,包含了一个分片Shard,分片包含了三个复制集(1个primary,2个secondary),一个路由server,两个配置server,最终架构图如下: 
这里写图片描述

从图中可以看到,集群包括几个部分: 
分片服务器:存储数据的地方,可以有多个分片,每个分片又可以有多个复制集 
配置服务器:保存分片数据与服务器映射等数据,可以配置成复制集,避免单点故障 
路由服务器:与client打交道,先查询配置服务器,找到数据所属的分片再获取数据返回给client 
client:客户端应用程序,不关心mongo是否使用了分片与复制集,只需与路由服务器交互

首先安装好MongoDB,我的安装目录为:D:\software\MongoDB\Server\3.4\bin 
安装之前,先创建好所需的目录,由于我只部署了一个分片(rs-a),分片包含三个复制集,2个配置服务器复制集、一个路由服务器,因此对应的数据目录如下: 
这里写图片描述 
同时创建log日志目录:

D:\software\MongoDB\data\log
  • 1

下面开始部署 
1. 配置分片复制集

- 创建实例 
命令行窗口进入bin目录下,使用如下命令(三个命令行窗口

mongod --port 3000 --shardsvr --replSet rs-a --dbpath "D:\software\MongoDB\data\data\rs-a-0" --logpath "D:\software\MongoDB\data\log\rs-a-0.log"mongod --port 3001 --shardsvr --replSet rs-a --dbpath "D:\software\MongoDB\data\data\rs-a-1" --logpath "D:\software\MongoDB\data\log\rs-a-1.log"mongod --port 3002 --shardsvr --replSet rs-a --dbpath "D:\software\MongoDB\data\data\rs-a-2" --logpath "D:\software\MongoDB\data\log\rs-a-2.log"
  • 1
  • 2
  • 3

这里 --shardsvr要求使用分片,--replSet要是使用复制集,复制集名称为 rs-a,这是我们便创建了包含三个复制集的一个分片,注意复制集名字要一致,同时 --logpath的参数要求是一个文件 而不是目录
上面只是创建了三个可以分片和使用复制集的服务器,我们需要对其初始化设置复制集中的primary和secondary

- 初始化,配置Primary和Secondary复制集 
接着再开一个窗口,连接其中的一个服务器,使用命令:mongo --port 3000,连接后使用命令 rs.initiate() 初始化,过一会儿,此实例便成为了Primary,可以使用 rs.isMaster()rs.status()查看对应情况,如下: 
这里写图片描述 
查看对应情况 
这里写图片描述 
此时,我们还需要把另外两个加入进来,成为Secondary,使用命令rs.add("host:port"),我的电脑名为 “HIH-D-11698”

这里写图片描述 
此时,带有分片的复制集便建立完成,同样可以使用rs.status()查看信息 
注意,MongDB默认Secondary是不支持读写操作的,要使Secondary能支持读,需要连接到Secondary的mongod,使用db.getMongo().setSlaveOk() 将其设为从服务器,但此时他还是不支持写操作

2. 配置Config Server 复制集 
这里需要将Config Server配置为复制集,即使复制集只包含一个mongo实例,如果你采用mongod --configsvr --port 27010 命令将配置服务器作为standalone mongod process,当你配置路由服务器Mongos的时候mongos --configdb localhost:27010 --port 27011就会报错

BadValue: configdb supports only replica set connection string  
  • 1

这是因为Mongo3.4及以上要求Config Server为复制集,具体问题可见https://stackoverflow.com/questions/42392923/unable-to-launch-mongos 
因此我这里将Config Server配置为包含2个实例的复制集,开两个窗口,运行如下命令:

mongod --port 27019 --configsvr --replSet rs-conf --dbpath "D:\software\MongoDB\data\data\config0" --logpath "D:\software\MongoDB\data\log\config0.log"mongod --port 27020 --configsvr --replSet rs-conf --dbpath "D:\software\MongoDB\data\data\config1" --logpath "D:\software\MongoDB\data\log\config1.log"
  • 1
  • 2

这里,复制集名称为rs-conf,同样我们需要按照前述配置分片复制集那样使用 rs.initiate()等命令进行配置,这里就省略了

3. 配置路由服务器 router server 
一开始当我使用 mongos --configdb HIH-D-11698:27019,HIH-D-11698:27020 --port 27018,报错,--configdb后面表示的是配置服务器地址,--port表示mongos的端口,但是这样报错

FailedToParse: invalid url [HIH-D-11698:27019,HIH-D-11698:27020]
  • 1

原来,mongos 要求config server是复制集并且在前面加上复制集的名称,参见https://stackoverflow.com/questions/38467269/mongodb-query-router-setup-issue-with-config-file 
因此按如下方式启动mongos 
这里写图片描述 
我之前配置的config server的复制集名称为 rs-conf

4. 添加创建的分片 
将我们前面创建的分片添加进去,使用命令 mongo --port 27018登录mongos,使用sh.addShard添加分片 
这里写图片描述 
使用sh.status()查看分片信息

5. 开启数据库的分片 
为了在数据库中使用分片,我们要使用sh.enableSharding()开启数据库的分片 
这里写图片描述 
可以看到数据库test开启了分片


总结如下:

1. 配置分片复制集
mongod --port 3000 --shardsvr --replSet rs-a --dbpath "C:\newsavedata\mangodata\data\rs-a-0" --logpath "C:\newsavedata\mangodata\log\rs-a-0.log"
mongod --port 3001 --shardsvr --replSet rs-a --dbpath "C:\newsavedata\mangodata\data\rs-a-1" --logpath "C:\newsavedata\mangodata\log\rs-a-1.log"
mongod --port 3002 --shardsvr --replSet rs-a --dbpath "C:\newsavedata\mangodata\data\rs-a-2" --logpath "C:\newsavedata\mangodata\log\rs-a-2.log"

# --install --serviceName "mongodb"
mongo --port 3000

rs.initiate()

rs.add("computerName:3001")
rs.add("computerName:3002")

2. 配置Config Server 复制集
mongod.exe --port 27019 --configsvr --replSet rs-conf --dbpath "C:\newsavedata\mangodata\data\config0" --logpath "C:\newsavedata\mangodata\log\config0.log"
mongod.exe --port 27020 --configsvr --replSet rs-conf --dbpath "C:\newsavedata\mangodata\data\config1" --logpath "C:\newsavedata\mangodata\log\config1.log"

mongo --port 27019

rs.initiate()

rs.add("computerName:27020")

3. 配置路由服务器 router server
mongos --configdb rs-conf/computerName:27019,computerName:27020 --logpath "C:\newsavedata\mangodata\log\mongos.log" --port 27018

4. 添加创建的分片
将我们前面创建的分片添加进去,使用命令 mongo --port 27018 登录mongos,使用sh.addShard添加分片
sh.addShard("rs-a/computerName:3000,computerName:3001,computerName:3002")

5. 开启数据库的分片 
为了在数据库中使用分片,我们要使用sh.enableSharding()开启数据库的分片

sh.enableSharding("test")

6. 在mongo client端链接mongo server端的路由server
mongo --port 27018
//在mongo的路由server上执行数据库的增删改查操作

7. 在新命令行窗口,执行如下命令,启动mongo-connector


//注意,此处的端口号指定为mongo的路由server的端口号
mongo-connector -m 127.0.0.1:27018 -t 127.0.0.1:9200 -d elastic2_doc_manager
 Logging to mongo-connector.log

//当主节点3000挂掉,从节点3001变成PRIMARY时,如果要手动重新切回来,需要执行下面命令
mongo --port 3001
//主动切换比较简单,通过在主库上执行rs.stepDown()方法即可
rs.stepDown()

//mongodb 复制集主节点切换方法
1。冻结其中的一个从节点,使其不参与到与primary 的内部选举工作
  进入客户端,执行(单位:秒)
  rs.freeze(30);

2.对原主节点进行降级
进入客户端,执行下面代码 (单位:秒)
rs.stepDown(15);
3.经过冻结和降级之后查看复制集状态 
rs.status();  
复制集顺利切换


》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》

原创粉丝点击