MongoDB从入门到实战

文章19 |   阅读 11390 |   点赞0

来源：https://blog.csdn.net/vbirdbest/category_7040900.html

MongoDB从入门到实战（十一）：副本集

转x33g5p2x  于2021-12-25 转载在 Go  
字(11.5k)|赞(0)|评价(0)|浏览(511)

一：简介

MongoDB中的复制集是一组维护相同数据集的mongod服务。复制提供了数据的冗余备份，并在多个服务器上存储数据副本，提高了数据的可用性， 并可以保证数据的安全性。复制还可以实现从硬件故障和服务中断中恢复数据。是所有生产部署的基础。

​ 也可以说，复制集类似于有自动故障恢复功能的主从集群。通俗的讲就是用多台机器进行同一数据的异步同步，从而使多台机器拥有同一数据的多个副本，并且当主库关掉时在不需要用户干预的情况下自动切换其他备份服务器做主库。而且还可以利用副本服务器做只读服务器，实现读写分离，提高负载。

（1）冗余和数据可用性

复制提供冗余并提高数据可用性。 通过在不同数据库服务器上提供多个数据副本，复制可提供一定级别的容错功能，以防止丢失单个数据库服务器。

在某些情况下，复制可以提供增加的读取性能，因为客户端可以将读取操作发送到不同的服务上， 在不同数据中心维护数据副本可以增加分布式应用程序的数据位置和可用性。 您还可以为专用目的维护其他副本，例如灾难恢复，报告或备份。

（2）MongoDB中的复制

复制集是一组维护相同数据集的mongod实例。 复制集包含多个数据承载节点和可选的一个仲裁节点。 在承载数据的节点中，一个且仅一个成员被视为主节点，而其他节点被视为次要（从）节点。主节点接收所有写操作。

为什么使用复制集？

  1. 保障数据的安全性；
  2. 数据高可用性 ；
  3. 灾难恢复；
  4. 无需停机维护；
  5. 分布式读取数据等

二：复制集原理

mongodb的复制至少需要两个节点。其中一个是主节点，负责处理客户端请求，其余的都是从节点(后备节点)，负责复制主节点上的数据。mongodb各个节点常见的搭配方式为：一主一从、一主多从。主节点记录在其上的所有操作oplog(oplog，操作日志的简称，是local库下一个特殊的固定集合，它保存了与数据库中数据存储相关的所有操作记录。从节点就是通过查看主节点 的oplog这个集合来进行复制的。每个节点都有oplog，记录着从主节点复制过来的信息，这样每个成员都可以作为同步源给其他节点。)，从节点定期查询主节点获取这些操作，然后对自己的数据副本执行这些操作，从而保证从节点的数据与主节点一致。

说明：辅助(副本)节点复制主节点的oplog并将操作应用于其数据集，以使辅助节点的数据集反映主节点的数据集。 如果主节点挂掉，则将在从节点中选举出主节点。

三：复制集的三个角色

复制集有两种类型三种角色。

两种类型：

  • 主节点（Primary）类型：数据操作的主要连接点，可读写。
  • 次要（辅助、从）节点（Secondaries）类型：数据冗余备份节点，可以读或选举。

三种角色：

  • 主要成员（Primary）：主要接收所有写操作。就是主节点。
  • 副本成员（Replicate）：负责同步主节点的数据操作日志更新本地数据库，从而保证副本节点的数据和主节点上的数据的一致性，不支持写操作；副本节点的从某种意义上来讲有点像赛跑，永远在追赶主节点的数据操作；
  • 仲裁者（Arbiter）：不负责保存具体的数据，只是在副本集进行主节点选举时提供自己的一个选票而已。当然也可以将仲裁服务器维护为副本集的一部分，即副本成员同时也可以是仲裁者。也是一种从节点类型。

关于仲裁者的额外说明：

您可以将额外的mongod实例添加到副本集作为仲裁者。 仲裁者不维护数据集。 仲裁者的目的是通过响应其他副本集成员的选举请求来维护副本集中的仲裁。 因为它们不存储数据集，所以仲裁器可以是提供副本集仲裁功能的好方法，其资源成本比具有数据集的全功能副本集成员更便宜。

如果您的副本集具有偶数个成员，请添加仲裁者以获得主要选举中的“大多数”投票。 仲裁者不需要专用硬件。

仲裁者将永远是仲裁者，而主要人员可能会退出并成为次要人员，而次要人员可能成为选举期间的主要人员。

如果你的副本+主节点的个数是偶数，建议加一个仲裁者，形成奇数，容易满足大多数的投票。

如果你的副本+主节点的个数是奇数，可以不加仲裁者。

四：复制集配置

一主一副本一仲裁

说明：

​ 本次复制集配置使用一个mongodb数据库，使用了三个节点，一个主节点（端口27000）、一个从节点（端口27001）、一个仲裁节点（端口27002）。在bin同级目录下创建一个data目录、config目录和log目录，分别放置数据库数据、数据库实例配置信息和数据库日志。下面是data和config目录的截图，下面有三个分目录，分别存放每个节点的数据。

在根目录下创建一个data目录，并在data目录下创建三个复制文件夹用于存储各自的配置文件。

在根目录下创建一个config目录，并在config目录下创建三个复制文件夹用于存储各自的配置文件。

config/rs1/mongod.cfg

  1. dbpath=/Users/mengday/Softwares/mongodb-4.4.5/data/rs1
  2. logpath=/Users/mengday/Softwares/mongodb-4.4.5/log/rs1.log
  3. journal=true
  4. port=27000
  5. replSet=rs
  6. logappend=true

config/rs2/mongod.cfg

  1. dbpath=/Users/mengday/Softwares/mongodb-4.4.5/data/rs2
  2. logpath=/Users/mengday/Softwares/mongodb-4.4.5/log/rs2.log
  3. journal=true
  4. port=27002
  5. replSet=rs
  6. logappend=true

config/rs3/mongod.cfg

  1. dbpath=/Users/mengday/Softwares/mongodb-4.4.5/data/rs3
  2. logpath=/Users/mengday/Softwares/mongodb-4.4.5/log/rs3.log
  3. journal=true
  4. port=27002
  5. replSet=rs
  6. logappend=true

注意：以上三个节点的复制集名字统一为rs。

  1. //主节点实例服务启动命令
  2. ./bin/mongod --config ./config/rs1/mongod.cfg
  3. //从节点实例服务启动命令
  4. ./bin/mongod --config ./config/rs2/mongod.cfg
  5. //仲裁节点实例服务启动命令
  6. ./bin/mongod --config ./config/rs3/mongod.cfg

  1. // 连接主节点
  2. mongo 127.0.0.1:27000/admin
  4. // 初始化, 注意此时不要初始化从节点和仲裁节点，不然后面主节点添加从节点的时候会报错。
  5. > rs.initiate()
  6. {
  7. 	"info2" : "no configuration specified. Using a default configuration for the set",
  8. 	"me" : "localhost:27000",
  9. 	"ok" : 1
  10. }
  12. // 初始化配置
  13. rs:SECONDARY> rs.conf()
  14. {
  15. 	"_id" : "rs",
  16. 	"version" : 1,
  17. 	"term" : 1,
  18. 	"protocolVersion" : NumberLong(1),
  19. 	"writeConcernMajorityJournalDefault" : true,
  20. 	"members" : [
  21. 		{
  22. 			"_id" : 0,
  23. 			"host" : "localhost:27000",
  24. 			"arbiterOnly" : false,
  25. 			"buildIndexes" : true,
  26. 			"hidden" : false,
  27. 			"priority" : 1,
  28. 			"tags" : {
  30. 			},
  31. 			"slaveDelay" : NumberLong(0),
  32. 			"votes" : 1
  33. 		}
  34. 	],
  35. 	"settings" : {
  36. 		"chainingAllowed" : true,
  37. 		"heartbeatIntervalMillis" : 2000,
  38. 		"heartbeatTimeoutSecs" : 10,
  39. 		"electionTimeoutMillis" : 10000,
  40. 		"catchUpTimeoutMillis" : -1,
  41. 		"catchUpTakeoverDelayMillis" : 30000,
  42. 		"getLastErrorModes" : {
  44. 		},
  45. 		"getLastErrorDefaults" : {
  46. 			"w" : 1,
  47. 			"wtimeout" : 0
  48. 		},
  49. 		"replicaSetId" : ObjectId("6076544a7353de75a9e532de")
  50. 	}
  51. }
  53. // 向主节点添加从节点
  54. rs:PRIMARY> rs.add("localhost:27001")
  55. {
  56. 	"ok" : 1,
  57. 	"$clusterTime" : {
  58. 		"clusterTime" : Timestamp(1618367820, 1),
  59. 		"signature" : {
  60. 			"hash" : BinData(0,"AAAAAAAAAAAAAAAAAAAAAAAAAAA="),
  61. 			"keyId" : NumberLong(0)
  62. 		}
  63. 	},
  64. 	"operationTime" : Timestamp(1618367820, 1)
  65. }
  67. // 向主节点添加仲裁节点
  68. rs:PRIMARY> rs.addArb("localhost:27002")
  69. {
  70. 	"ok" : 1,
  71. 	"$clusterTime" : {
  72. 		"clusterTime" : Timestamp(1618367859, 1),
  73. 		"signature" : {
  74. 			"hash" : BinData(0,"AAAAAAAAAAAAAAAAAAAAAAAAAAA="),
  75. 			"keyId" : NumberLong(0)
  76. 		}
  77. 	},
  78. 	"operationTime" : Timestamp(1618367859, 1)
  79. }
  81. // 查看主节点状态
  82. rs:PRIMARY> rs.status()
  83. {
  84. 	"set" : "rs",
  85. 	"date" : ISODate("2021-04-14T02:38:11.408Z"),
  86. 	"myState" : 1,
  87. 	"term" : NumberLong(1),
  88. 	"syncSourceHost" : "",
  89. 	"syncSourceId" : -1,
  90. 	"heartbeatIntervalMillis" : NumberLong(2000),
  91. 	"majorityVoteCount" : 2,
  92. 	"writeMajorityCount" : 2,
  93. 	"votingMembersCount" : 3,
  94. 	"writableVotingMembersCount" : 2,
  95. 	"optimes" : {
  96. 		"lastCommittedOpTime" : {
  97. 			"ts" : Timestamp(1618367883, 1),
  98. 			"t" : NumberLong(1)
  99. 		},
  100. 		"lastCommittedWallTime" : ISODate("2021-04-14T02:38:03.166Z"),
  101. 		"readConcernMajorityOpTime" : {
  102. 			"ts" : Timestamp(1618367883, 1),
  103. 			"t" : NumberLong(1)
  104. 		},
  105. 		"readConcernMajorityWallTime" : ISODate("2021-04-14T02:38:03.166Z"),
  106. 		"appliedOpTime" : {
  107. 			"ts" : Timestamp(1618367883, 1),
  108. 			"t" : NumberLong(1)
  109. 		},
  110. 		"durableOpTime" : {
  111. 			"ts" : Timestamp(1618367883, 1),
  112. 			"t" : NumberLong(1)
  113. 		},
  114. 		"lastAppliedWallTime" : ISODate("2021-04-14T02:38:03.166Z"),
  115. 		"lastDurableWallTime" : ISODate("2021-04-14T02:38:03.166Z")
  116. 	},
  117. 	"lastStableRecoveryTimestamp" : Timestamp(1618367859, 1),
  118. 	"electionCandidateMetrics" : {
  119. 		"lastElectionReason" : "electionTimeout",
  120. 		"lastElectionDate" : ISODate("2021-04-14T02:32:42.923Z"),
  121. 		"electionTerm" : NumberLong(1),
  122. 		"lastCommittedOpTimeAtElection" : {
  123. 			"ts" : Timestamp(0, 0),
  124. 			"t" : NumberLong(-1)
  125. 		},
  126. 		"lastSeenOpTimeAtElection" : {
  127. 			"ts" : Timestamp(1618367562, 1),
  128. 			"t" : NumberLong(-1)
  129. 		},
  130. 		"numVotesNeeded" : 1,
  131. 		"priorityAtElection" : 1,
  132. 		"electionTimeoutMillis" : NumberLong(10000),
  133. 		"newTermStartDate" : ISODate("2021-04-14T02:32:42.964Z"),
  134. 		"wMajorityWriteAvailabilityDate" : ISODate("2021-04-14T02:32:43.021Z")
  135. 	},
  136. 	"members" : [
  137. 		{
  138. 			"_id" : 0,
  139. 			"name" : "localhost:27000",
  140. 			"health" : 1,
  141. 			"state" : 1,
  142. 			"stateStr" : "PRIMARY",
  143. 			"uptime" : 719,
  144. 			"optime" : {
  145. 				"ts" : Timestamp(1618367883, 1),
  146. 				"t" : NumberLong(1)
  147. 			},
  148. 			"optimeDate" : ISODate("2021-04-14T02:38:03Z"),
  149. 			"syncSourceHost" : "",
  150. 			"syncSourceId" : -1,
  151. 			"infoMessage" : "",
  152. 			"electionTime" : Timestamp(1618367562, 2),
  153. 			"electionDate" : ISODate("2021-04-14T02:32:42Z"),
  154. 			"configVersion" : 3,
  155. 			"configTerm" : 1,
  156. 			"self" : true,
  157. 			"lastHeartbeatMessage" : ""
  158. 		},
  159. 		{
  160. 			"_id" : 1,
  161. 			"name" : "localhost:27001",
  162. 			"health" : 1,
  163. 			"state" : 2,
  164. 			"stateStr" : "SECONDARY",
  165. 			"uptime" : 71,
  166. 			"optime" : {
  167. 				"ts" : Timestamp(1618367883, 1),
  168. 				"t" : NumberLong(1)
  169. 			},
  170. 			"optimeDurable" : {
  171. 				"ts" : Timestamp(1618367883, 1),
  172. 				"t" : NumberLong(1)
  173. 			},
  174. 			"optimeDate" : ISODate("2021-04-14T02:38:03Z"),
  175. 			"optimeDurableDate" : ISODate("2021-04-14T02:38:03Z"),
  176. 			"lastHeartbeat" : ISODate("2021-04-14T02:38:09.730Z"),
  177. 			"lastHeartbeatRecv" : ISODate("2021-04-14T02:38:09.764Z"),
  178. 			"pingMs" : NumberLong(0),
  179. 			"lastHeartbeatMessage" : "",
  180. 			"syncSourceHost" : "localhost:27000",
  181. 			"syncSourceId" : 0,
  182. 			"infoMessage" : "",
  183. 			"configVersion" : 3,
  184. 			"configTerm" : 1
  185. 		},
  186. 		{
  187. 			"_id" : 2,
  188. 			"name" : "localhost:27002",
  189. 			"health" : 1,
  190. 			"state" : 7,
  191. 			"stateStr" : "ARBITER",
  192. 			"uptime" : 31,
  193. 			"lastHeartbeat" : ISODate("2021-04-14T02:38:09.730Z"),
  194. 			"lastHeartbeatRecv" : ISODate("2021-04-14T02:38:09.807Z"),
  195. 			"pingMs" : NumberLong(0),
  196. 			"lastHeartbeatMessage" : "",
  197. 			"syncSourceHost" : "",
  198. 			"syncSourceId" : -1,
  199. 			"infoMessage" : "",
  200. 			"configVersion" : 3,
  201. 			"configTerm" : 1
  202. 		}
  203. 	],
  204. 	"ok" : 1,
  205. 	"$clusterTime" : {
  206. 		"clusterTime" : Timestamp(1618367883, 1),
  207. 		"signature" : {
  208. 			"hash" : BinData(0,"AAAAAAAAAAAAAAAAAAAAAAAAAAA="),
  209. 			"keyId" : NumberLong(0)
  210. 		}
  211. 	},
  212. 	"operationTime" : Timestamp(1618367883, 1)
  213. }
  214. rs:PRIMARY>

注意members项里面的成员是添加的个数。并且每个节点的“stateStr”分别是“PRIMARY”、“SECONDARY”、“ARBITER”。这时候登录从节点或者仲裁节点（不需要初始化和初始化配置）。查看节点状态，和主节点相同的配置会输出出来。至此，本mongodb数据库的复制集配置完成。

五：Compass 连接副本集

六：添加用户

  1. rs:PRIMARY> use admin
  2. switched to db admin
  3. rs:PRIMARY> db.createUser({
  4. ... user: "admin",
  5. ...     pwd: "admin",
  6. ...     roles: [{ role: "userAdminAnyDatabase", db: "admin" }]
  7. ... })
  8. Successfully added user: {
  9. 	"user" : "admin",
  10. 	"roles" : [
  11. 		{
  12. 			"role" : "userAdminAnyDatabase",
  13. 			"db" : "admin"
  14. 		}
  15. 	]
  16. }
  17. rs:PRIMARY> db.createUser({
  18. ... user: "root",
  19. ... pwd: "root",
  20. ... roles: [ { role: "root", db: "admin" } ]
  21. ... })
  22. Successfully added user: {
  23. 	"user" : "root",
  24. 	"roles" : [
  25. 		{
  26. 			"role" : "root",
  27. 			"db" : "admin"
  28. 		}
  29. 	]
  30. }
  31. rs:PRIMARY> use test
  32. switched to db test
  33. rs:PRIMARY> db.createUser({
  34. ... user: "mongo",
  35. ... pwd: "123456",
  36. ... roles: [ { role: "dbOwner", db: "test" } ]
  37. ... })
  38. Successfully added user: {
  39. 	"user" : "mongo",
  40. 	"roles" : [
  41. 		{
  42. 			"role" : "dbOwner",
  43. 			"db" : "test"
  44. 		}
  45. 	]
  46. }
  47. rs:PRIMARY> show users
  48. {
  49. 	"_id" : "test.mongo",
  50. 	"userId" : UUID("7f842cc4-9c1f-4932-b570-d2f705e7ab34"),
  51. 	"user" : "mongo",
  52. 	"db" : "test",
  53. 	"roles" : [
  54. 		{
  55. 			"role" : "dbOwner",
  56. 			"db" : "test"
  57. 		}
  58. 	],
  59. 	"mechanisms" : [
  60. 		"SCRAM-SHA-1",
  61. 		"SCRAM-SHA-256"
  62. 	]
  63. }
  64. rs:PRIMARY>
  66. // 向主节点插入一条数据
  67. rs:PRIMARY> db.foo.insert({"key": "value"})
  68. WriteResult({ "nInserted" : 1 })
  1. // 登录从节点
  2. ./bin/mongo 127.0.0.1:27001/admin
  4. // 查看从节点上的数据库，报错
  5. rs:SECONDARY> show dbs
  6. uncaught exception: Error: listDatabases failed:{
  7. 	"topologyVersion" : {
  8. 		"processId" : ObjectId("607652cbcf3e7e9151103453"),
  9. 		"counter" : NumberLong(4)
  10. 	},
  11. 	"operationTime" : Timestamp(1618383611, 1),
  12. 	"ok" : 0,
  13. 	"errmsg" : "not master and slaveOk=false",
  14. 	"code" : 13435,
  15. 	"codeName" : "NotPrimaryNoSecondaryOk",
  16. 	"$clusterTime" : {
  17. 		"clusterTime" : Timestamp(1618383611, 1),
  18. 		"signature" : {
  19. 			"hash" : BinData(0,"AAAAAAAAAAAAAAAAAAAAAAAAAAA="),
  20. 			"keyId" : NumberLong(0)
  21. 		}
  22. 	}
  23. }
  25. // 当前从节点只是一个备份，不是奴隶节点，无法读取数据，写当然更不行。
  26. // 因为默认情况下，从节点是没有读写权限的，可以增加读的权限，但需要进行设置。
  27. // 设置为奴隶节点，允许在从成员上运行读的操作
  28. rs:SECONDARY> rs.secondaryOk()
  30. // 从节点上的数据从主节点上复制过来了
  31. rs:SECONDARY> show dbs
  32. admin   0.000GB
  33. config  0.000GB
  34. local   0.000GB
  35. test    0.000GB
  36. rs:SECONDARY> use test
  37. rs:SECONDARY> db.foo.find()
  38. { "_id" : ObjectId("607692bcc83116b2c09bb439"), "key" : "value" }

版权说明 : 本文为转载文章, 版权归原作者所有 版权申明

原文链接 : https://monday.blog.csdn.net/article/details/115691533

内容来源于网络，如有侵权，请联系作者删除！

mongodb

相关文章

    查看更多
    • 蜀ICP备13028337号-1 大数据知识库 https://www.saoniuhuo.com © All rights reserved
    • 本站内容来源互联网,如果侵犯您的权益请联系我们删除, 联系方式：448109455@qq.com