hyman-海曼工具

一些简单的记录

0%

记录MongoDB3.4分片的一些配置

发表于 更新于 分类于

MongoDB介绍

MongoDB 是由C++语言编写的，是一个基于分布式文件存储的开源数据库系统。在高负载的情况下，添加更多的节点，可以保证服务器性能。MongoDB 旨在为WEB应用提供可扩展的高性能数据存储解决方案。MongoDB 将数据存储为一个文档，数据结构由键值(key=>value)对组成。MongoDB 文档类似于 JSON 对象。字段值可以包含其他文档，数组及文档数组。

MongoDB特点

  • MongoDB的提供了一个面向文档存储，操作起来比较简单和容易。
  • 你可以在MongoDB记录中设置任何属性的索引 (如：FirstName=”Ning”,Address=”Beijing”)来实现更快的排序。
  • 你可以通过本地或者网络创建数据镜像，这使得MongoDB有更强的扩展性。
  • 如果负载的增加（需要更多的存储空间和更强的处理能力） ，它可以分布在计算机网络中的其他节点上这就是所谓的分片。
  • Mongo支持丰富的查询表达式。查询指令使用JSON形式的标记，可轻易查询文档中内嵌的对象及数组。
  • MongoDb 使用update()命令可以实现替换完成的文档（数据）或者一些指定的数据字段 。
  • Mongodb中的Map/reduce主要是用来对数据进行批量处理和聚合操作。
  • Map和Reduce。Map函数调用emit(key,value)遍历集合中所有的记录，将key与value传给Reduce函数进行处理。
  • Map函数和Reduce函数是使用Javascript编写的，并可以通过db.runCommand或mapreduce命令来执行MapReduce操作。
  • GridFS是MongoDB中的一个内置功能，可以用于存放大量小文件。
  • MongoDB允许在服务端执行脚本，可以用Javascript编写某个函数，直接在服务端执行，也可以把函数的定义存储在服务端，下次直接调用即可。
  • MongoDB支持各种编程语言:RUBY，PYTHON，JAVA，C++，PHP，C#等多种语言。

MongoDB安装

yum安装

官网：https://docs.mongodb.com/master/tutorial/install-mongodb-on-red-hat/

1
2
3
4
5
6
7
8
9
[root@object1 ~]# vim /etc/yum.repos.d/mongodb-org-3.4.repo
[mongodb-org-3.4]
name=MongoDB Repository
baseurl=https://repo.mongodb.org/yum/redhat/$releasever/mongodb-org/3.4/x86_64/
gpgcheck=1
enabled=1
gpgkey=https://www.mongodb.org/static/pgp/server-3.4.asc

[root@object1 ~]#sudo yum install -y mongodb-org

下载

官网：https://www.mongodb.com/download-center?jmp=nav#community

1
2
3
4
5
6
[root@object1 ~]#curl -O https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-rhel70-3.4.4.tgz
[root@object1 ~]#tar -zxvf mongodb-linux-x86_64-rhel70-3.4.4.tgz 
[root@object1 ~]# mv mongodb-linux-x86_64-rhel70-3.4.4 /usr/local/mongodb

#把安装目录添加到系统环境中
export PATH=/usr/local/mongodb/bin:$PATH

配置文件

官网：https://docs.mongodb.com/manual/administration/configuration/

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
#使用YAML配置也可以使用原ini配置
#基本设置
processManagement:
   fork: true
   pidFilePath: /home/mongodb/mongodb.pid
storage:
   dbPath: /home/mongodb/data
systemLog:
   destination: file
   path: "/home/mongodb/log/mongod.log"
   logAppend: true
storage:
   journal:
      enabled: true

#安全
security:
   authorization: enabled
net:
   bindIp: 192.168.1.226
   port: 27017

#副本集
replication:
   replSetName: set0
#副本集安全
security:
   keyFile: /home/mongodb/keyfile

分片配置
分片服务器

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
processManagement:
   fork: true
   pidFilePath: /home/mongodb/mongodb.pid
storage:
   dbPath: /home/mongodb/data
systemLog:
   destination: file
   path: "/home/mongodb/log/mongod.log"
   logAppend: true
storage:
   journal:
      enabled: true
net:
   bindIp: 192.168.1.226
   port: 27017
sharding:
   clusterRole: shardsvr
replication:
   replSetName: shardA

配置服务器

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
processManagement:
   fork: true
   pidFilePath: /home/mongodb/mongodb.pid
storage:
   dbPath: /home/mongodb/data
systemLog:
   destination: file
   path: "/home/mongodb/log/mongod.log"
   logAppend: true
storage:
   journal:
      enabled: true
sharding:
    clusterRole: configsvr
net:
    bindIp: 192.168.1.226
    port: 27001
replication:
    replSetName: csRS

路由服务器

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
processManagement:
   fork: true
   pidFilePath: /home/mongodb/mongos.pid
#storage:
#   dbPath: /home/mongodb/data
systemLog:
   destination: file
   path: "/home/mongodb/log/mongos.log"
   logAppend: true
#storage:
#   journal:
#      enabled: true
net:
    bindIp: 192.168.1.226
    port: 28001
sharding:
   configDB: csRS/192.168.1.226:27001,192.168.1.226:27002,192.168.1.226:27003

启动mongodb

1
2
3
[root@object1 ~]# /usr/local/mongodb/bin/mongod -f 分片服务器配置文件
[root@object1 ~]# /usr/local/mongodb/bin/mongod -f 配置服务器配置文件
[root@object1 ~]# /usr/local/mongodb/bin/mongos -f 路由服务器配置文件

初始化mongodb

分片服务器

1
2
3
4
5
6
7
8
[root@object1 ~]# /usr/local/mongodb/bin/mongo --port 27017
>use admin
>config = {_id:"shardA",members:[
{_id:0, host:"192.168.1.226:27017"},
{_id:1, host:"192.168.1.226:27018"},
{_id:2, host:"192.168.1.226:27019"}
]}
>rs.initiate(config)

配置服务器

1
2
3
4
5
6
7
8
[root@object1 ~]# /usr/local/mongodb/bin/mongo --port 27001
>use admin
>config = {_id:"csRS",configsvr:true,members:[
{_id:0, host:"192.168.1.226:27001"},
{_id:1, host:"192.168.1.226:27002"},
{_id:2, host:"192.168.1.226:27003"}
]}
>rs.initiate(config)

启动分片

1
2
3
4
[root@object1 mongodb]# mongo --port 28001
mongos> use admin
mongos> db.runCommand( { addShard: "shardA/192.168.1.226:27017,192.168.1.226:27018,192.168.1.226:27019"} )