mongodb--复制集和故障诊断（笔记）

痛定思痛。 2023-07-16 11:54 13阅读 0赞

## 复制集 ##

*  主从节点，主节点负责读和写，从节点只有读取功能。
 *  从节点备份数据，主节点故障后，从节点替换主节点。
 *  每个节点都会向其他节点发送心跳，默认每隔2秒一次，超过10秒超时（默认）。
 *  复制集中最多50个节点。

**选举**

*  候选节点发起选举，每个节点投票比自己更同步的节点
 *  得到超过半数选票的节点会当选为主节点
 *  复制集中最多可以有7个投票节点
 *  触发条件：心跳超时、复制集初始化、新节点加入复制集
 *  没有数据的节点可以投票，不能成为主节点

同一台服务器，使用docker创建复制集

# 创建network docker内部使用，是应为在同一天服务器上才用的，不同服务器可用不设置
    docker network create mynetwork
    
    # 查询使用的应用
    docker network ls
    
    # 运行三个节点
    docker run --net mynetwork --name mongol -v /mymongo/data1:/data/db -p 27017:27017 -d mongo:4 --replSet myset --port 27017
    docker run --net mynetwork --name mongo2 -v /mymongo/data1:/data/db -p 27018:27018 -d mongo:4 --replSet myset --port 27018
    docker run --net mynetwork --name mongo3 -v /mymongo/data1:/data/db -p 27019:27019 -d mongo:4 --replSet myset --port 27019
    
    # 创建复制集
    docker exec -it mongo1 mongo
    > rs.initiate(
        {
            _id: "myset",
            members: [
                {_id: 0,host : "mongo1: 27017"},
                {_id: 1,host : "mongo2: 27018"},
                {_id: 2,host : "mongo3: 27019"}
            ]
        }
    )
    
    # 查看状态
    > rs.status()

非docker添加方式

*   使用下面配置启动 3个mongodb数据库（port使用27001，27002，27003）

vim mongodb.conf
    # 添加下面内容
    dbpath = /usr/local/mongodb/data/db #数据文件存放目录  
    logpath = /usr/local/mongodb/logs/mongodb.log #日志文件存放目录  
    port = 27001  #端口  
    fork = true  #以守护程序的方式启用，即在后台运行  
    bind_ip=192.168.204.81  #指定内网访问ip   0.0.0.0允许远程访问
    replSet=rs0  #复制集名称
    
    auth = true #开启用户验证才能访问
    keyFile=/usr/local/mongodb/.keyFile   #集群使用相互验证（和上面auth配合使用）

*  集群验证初始化（keyFile,需要要把这个拷贝到上面三台服务器对应的 mongodb文件路径下）

# 到需要生成的地方
    cd /usr/local/mongodb/
    touch .keyFile
    chmod 600 .keyFile
    # 生成key
    openssl rand -base64 102 > .keyFile
    # 服务器启动mongodb
    ./mongod -f mongodb.conf

*  进入27001 初始化副本配置

# 进入mongodb
    mongo 192.168.204.81:27001/admin
    
    # 填写副本成员信息
    config = {"_id":"rs0",
    		  "members":[
    		  {"_id":0,host:"192.168.204.81:27001"},
    		  {"_id":1,host:"192.168.204.81:27002"},
    		  {"_id":2,host:"192.168.204.81:27003"}
              ]
    }
    # 执行初始化
    rs.initiate(config)
    # 查看执行结果
    rs.status()

*  副本集简单维护

# 添加新节点
    rs.add("ip:port")
    # 删除节点
    rs.remove("ip:port")
    # 主节点降级
    rs.stepDown(整数)，意思是在整数秒内降级

## **授权（操作权限）** ##

# 可用提供的权限
    read    可读取非系统集合
    readWrite    读写当前数据库中非系统集合
    dbAdmin    管理当前数据库
    userAdmin    管理当前数据库中的用户和角色
    userAdminAnyDatabase    最高权限账号角色
    read/readWrite/dbAdmin/userAdminAnyDatabase    对所有数据库执行操作（只在admin数据库中提供）

模板

# 授权方式（在哪里 == 做什么）
    # 赋予集合的查询和更新权限
    {resource: {db: "test", collection: ""},actions: ["find","update"]}
    
    # 赋予集群的关闭权限
    {resource: {cluster: true}, actions: ["shutdown"]}

例子

# 创建一个只能读取test数据库的用户
    db.createUser({
        user: "myUserAdmin",
        pwd: "password",
        roles: [{role: "read",db: "test"}]
    })
    
    # 创建一个只能读取指定集合accounts的用户
    use test;
    db.createUser({
        user: "myUserAdmin",
        privleges: [resource: {db: "test", collection: "accounts"},actions: ["find"]],
        roles: []
    })
    
    # 角色权限可以继承
    use test;
    db.createUser({
        user: "grayCat",
        pwd: "password",
        roles: ["myUserAdmin"]
    })

## 故障诊断 ##

监控数据库状态

mongostat --host localhost --port 27017 -o "command,dirty,used,vsize,res,conn,time"

cat /data/db/mongo.conf
    net:
        maxIncomingConnections: 200   # 最大连接数
    storage:
        dbPath: /data/db
        wiredTiger:
            engineConfig:
                cacheSizeGB: 0.25    # 内存使用限制

open files 文件描述器（也影响连接数），mongo 内部文档访问会暂用连接，这里提供给外部访问的连接数也就小于2000

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM1NDE4NTE4_size_16_color_FFFFFF_t_70][]

其他文章里的分片

[https://www.jianshu.com/p/af77d3b45556][https_www.jianshu.com_p_af77d3b45556]

<table style="width:611px;"> 
 <tbody> 
 <tr> 
 <td style="width:89.625px;"> 参数 </td> 
 <td style="width:507px;"> 参数说明 </td> 
 </tr> 
 <tr> 
 <td style="width:89.625px;"> insert </td> 
 <td style="width:507px;"> 每秒插入量 </td> 
 </tr> 
 <tr> 
 <td style="width:89.625px;"> query </td> 
 <td style="width:507px;"> 每秒查询量 </td> 
 </tr> 
 <tr> 
 <td style="width:89.625px;"> update </td> 
 <td style="width:507px;"> 每秒更新量 </td> 
 </tr> 
 <tr> 
 <td style="width:89.625px;"> delete </td> 
 <td style="width:507px;"> 每秒删除量 </td> 
 </tr> 
 <tr> 
 <td style="width:89.625px;"> conn </td> 
 <td style="width:507px;"> 当前连接数 </td> 
 </tr> 
 <tr> 
 <td style="width:89.625px;"> qr|qw </td> 
 <td style="width:507px;"> 客户端查询排队长度（读|写）最好为0，如果有堆积，数据库处理慢。 </td> 
 </tr> 
 <tr> 
 <td style="width:89.625px;"> ar|aw </td> 
 <td style="width:507px;"> 活跃客户端数量（读|写） </td> 
 </tr> 
 <tr> 
 <td style="width:89.625px;"> time </td> 
 <td style="width:507px;"> 当前时间 </td> 
 </tr> 
 </tbody> 
</table>

root@6003b155ebbc:/usr/bin# ./mongostat -h 127.0.0.1 --port 27017 
    insert query update delete getmore command dirty used flushes vsize  res qrw arw net_in net_out conn                time
        *0    *0      1     *0       0     2|0  0.5% 9.1%       0 2.07G 991M 0|0 1|0   493b   64.8k   59 Aug  5 17:43:24.772
        *0     8      3     *0       0     3|0  0.5% 9.1%       0 2.07G 991M 0|0 1|0  4.29k    189k   59 Aug  5 17:43:25.773
        *0     3     *0     *0       0     3|0  0.5% 9.1%       0 2.07G 991M 0|0 1|0   433b   69.7k   59 Aug  5 17:43:26.771
        *0     1     *0     *0       0     4|0  0.5% 9.1%       0 2.07G 991M 0|0 1|0   360b   65.4k   59 Aug  5 17:43:27.771
    ^C2020-08-05T17:43:28.740+0000	signal 'interrupt' received; forcefully terminating
    root@6003b155ebbc:/usr/bin#

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM1NDE4NTE4_size_16_color_FFFFFF_t_70]: /images/20230528/4036d22bc81545d6b26b0d6802997439.png
[https_www.jianshu.com_p_af77d3b45556]: https://www.jianshu.com/p/af77d3b45556