【ceph】/etc/init.d/ceph: osd.1 not found (/etc/ceph/ceph.conf defines , /var/lib/ceph defines )解决方法

冷不防 2022-09-03 12:12 164阅读 0赞

### 文章目录 ###

*  报错说明
 *  信息验证
 *   *  osd状态
     *  osd的ceph文件是否存在
     *  硬盘是否存在
     *  mon节点状态
 *  解决方法
 *  osd状态查看

# 报错说明 #

存储的某个osd状态为down，但是当我们启动这个osd的时候，就会报如下错误【其实这个osd肯定是存在的】

[root@stor-21 ~]# service ceph start osd.1
    /etc/init.d/ceph: osd.1 not found (/etc/ceph/ceph.conf defines , /var/lib/ceph defines )

# 信息验证 #

## osd状态 ##

命令：`ceph osd tree`  
这是查看状态是否为down，其实更重要的是确认池中有这个主机存在

[root@stor-21 ~]# ceph osd tree | grep -A 9 stor-21
    -3 18.20000     host stor-21                                   
     1  1.81999         osd.1         down  0.88808          1.00000 
     3  1.81999         osd.3         down  1.00000          1.00000 
     6  1.81999         osd.6         down  1.00000          1.00000 
     9  1.81999         osd.9         down  0.96855          1.00000 
    12  1.81999         osd.12        down  1.00000          1.00000 
    15  1.81999         osd.15        down  0.90279          1.00000 
    18  1.81999         osd.18        down  1.00000          1.00000 
    21  1.81999         osd.21        down  0.86520          1.00000 
    27  1.81999         osd.27        down  0.89455          1.00000 
    [root@stor-21 ~]#

## osd的ceph文件是否存在 ##

路径是：`/var/lib/ceph/osd`，这里面会有该主机的osd信息，和上面的osd tree对应上才对

[root@stor-21 osd]# pwd
    /var/lib/ceph/osd
    [root@stor-21 osd]# 
    [root@stor-21 osd]# ls
    ceph-1  ceph-12  ceph-15  ceph-18  ceph-21  ceph-24  ceph-27  ceph-3  ceph-6  ceph-9
    [root@stor-21 osd]#

## 硬盘是否存在 ##

直接用命令:`lsblk`查看硬盘数量是否对，如果这时候硬盘后面挂载路径没了，是正常的，因为osd状态为down了【下面是正常后的截图】。

[root@stor-21 osd]# lsblk | tail -n 15
    └─sdp1                   8:241  1  1.8T  0 part /var/lib/ceph/osd/ceph-12
    sdq                     65:0    1  1.8T  0 disk 
    └─sdq1                  65:1    1  1.8T  0 part /var/lib/ceph/osd/ceph-15
    sdr                     65:16   1  1.8T  0 disk 
    └─sdr1                  65:17   1  1.8T  0 part /var/lib/ceph/osd/ceph-18
    sds                     65:32   1  1.8T  0 disk 
    └─sds1                  65:33   1  1.8T  0 part /var/lib/ceph/osd/ceph-21
    sdt                     65:48   1  1.8T  0 disk 
    └─sdt1                  65:49   1  1.8T  0 part /var/lib/ceph/osd/ceph-24
    sdu                     65:64   1  1.8T  0 disk 
    └─sdu1                  65:65   1  1.8T  0 part /var/lib/ceph/osd/ceph-27
    sr0                     11:0    1 1024M  0 rom  
    sr1                     11:1    1 1024M  0 rom  
    sr2                     11:2    1 1024M  0 rom  
    sr3                     11:3    1 1024M  0 rom  
    [root@stor-21 osd]#

## mon节点状态 ##

*  至于当前主机是不是monitor节点，自己想办法验证吧，方法不一定，我这不说明
 *  当前我的21主机是mon节点  
    查看mon节点状态的命令为：`service ceph status mon.主机名`

[root@stor-21 osd]# service ceph status mon.stor-21
    === mon.stor-21 === 
    mon.stor-21: running { "version":"0.94.6"}
    [root@stor-21 osd]#

*  如果状态不是running，就启动  
    命令：`service ceph start mon.主机名`

# 解决方法 #

*  再说明一下，如果使用命令启动osd报错就用下面方法
 *  命令启动命令有2种【在osd所属主机上操作】
    
     *  1:`service ceph osd.序号`【ceph osd tree 可以看到序号】
     *  2:`/etc/init.d/ceph start osd序号`【ceph osd tree 可以看到序号】
 *  这种情况我们可以激活osd的方式启动，命令：  
    `ceph-disk activate /dev/格式化后的硬盘名称` 【lsblk可以看】  
    具体的直接看下面吧

#下面是历史命令
      944  ceph-disk activate /dev/sdm1
      945  ceph-disk activate /dev/sdn1
      946  service ceph status
      947  ceph-disk activate /dev/sdo1
      948  ceph-disk activate /dev/sdp1
      949  service ceph status
      950  service ceph start mon.stor-21
      951  service ceph status
      952  ceph-disk activate /dev/sdq1
      953  ceph-disk activate /dev/sdr1
      954  ceph-disk activate /dev/sds1
      955  ceph-disk activate /dev/sdt1
      956  lsblk
    
    
    # 下面是lsblk看到的硬盘序号
    sdl                      8:176  1  1.8T  0 disk 
    └─sdl1                   8:177  1  1.8T  0 part /var/lib/ceph/osd/ceph-1
    sdm                      8:192  1  1.8T  0 disk 
    └─sdm1                   8:193  1  1.8T  0 part /var/lib/ceph/osd/ceph-3
    sdn                      8:208  1  1.8T  0 disk 
    └─sdn1                   8:209  1  1.8T  0 part /var/lib/ceph/osd/ceph-6
    sdo                      8:224  1  1.8T  0 disk 
    └─sdo1                   8:225  1  1.8T  0 part /var/lib/ceph/osd/ceph-9
    sdp                      8:240  1  1.8T  0 disk 
    └─sdp1                   8:241  1  1.8T  0 part /var/lib/ceph/osd/ceph-12
    sdq                     65:0    1  1.8T  0 disk 
    └─sdq1                  65:1    1  1.8T  0 part /var/lib/ceph/osd/ceph-15
    sdr                     65:16   1  1.8T  0 disk 
    └─sdr1                  65:17   1  1.8T  0 part /var/lib/ceph/osd/ceph-18
    sds                     65:32   1  1.8T  0 disk 
    └─sds1                  65:33   1  1.8T  0 part /var/lib/ceph/osd/ceph-21
    sdt                     65:48   1  1.8T  0 disk 
    └─sdt1                  65:49   1  1.8T  0 part /var/lib/ceph/osd/ceph-24
    sdu                     65:64   1  1.8T  0 disk 
    └─sdu1                  65:65   1  1.8T  0 part /var/lib/ceph/osd/ceph-27

*  极端一点，如果上述方法还是挂载不起来，我们知道通过命令也好还是上面方法也好，最终成功后都是硬盘挂载到osd的ceph文件，那么我们直接用`mount`将硬盘挂载到osd的ceph文件上呢！ 【因为这个挂载关系是固定的，如果之前没有挂载信息记录，不要这么搞，有挂载信息的，可以试试其中一台，反正最终坏了也才坏1个osd而已，大不了就重新加入集群呗！】
 *  正常流程：如果上面都不行的话，可以考虑将osd剔除集群，然后重新加入集群了，这样的弊端就是：数据同步量会增大，而已！！！

# osd状态查看 #

命令：`service seph status`  
这个就是查看每个osd的状态信息的

[root@stor-21 ~]# service ceph status
    === mon.stor-21 === 
    mon.stor-21: running { "version":"0.94.6"}
    === osd.1 === 
    osd.1: running { "version":"0.94.6"}
    === osd.3 === 
    osd.3: running { "version":"0.94.6"}
    === osd.6 === 
    osd.6: running { "version":"0.94.6"}
    === osd.9 === 
    osd.9: running { "version":"0.94.6"}
    === osd.12 === 
    osd.12: running { "version":"0.94.6"}
    === osd.15 === 
    osd.15: running { "version":"0.94.6"}
    === osd.18 === 
    osd.18: running { "version":"0.94.6"}
    === osd.21 === 
    osd.21: running { "version":"0.94.6"}
    === osd.24 === 
    osd.24: running { "version":"0.94.6"}
    === osd.27 === 
    osd.27: running { "version":"0.94.6"}
    [root@stor-21 ~]#