Centos 强制CEPH同步和CEPH更新建议

我们使用CEPH集群来存储虚拟机的映像。此群集包含3个监视器、4个存储节点和1个管理员

CEPH OSD树

ID WEIGHT   TYPE NAME       UP/DOWN REWEIGHT PRIMARY-AFFINITY
-1 21.82190 root default
-2  5.45547     host ceph01
 0  1.09109         osd.0        up  1.00000          1.00000
 1  1.09109         osd.1        up  1.00000          1.00000
 2  1.09109         osd.2        up  1.00000          1.00000
 3  1.09109         osd.3        up  1.00000          1.00000
 4  1.09109         osd.4        up  1.00000          1.00000
-3  5.45547     host ceph02
 5  1.09109         osd.5        up  1.00000          1.00000
 6  1.09109         osd.6        up  1.00000          1.00000
 7  1.09109         osd.7        up  1.00000          1.00000
 8  1.09109         osd.8        up  1.00000          1.00000
 9  1.09109         osd.9        up  1.00000          1.00000
-4  5.45547     host ceph03
10  1.09109         osd.10       up  1.00000          1.00000
11  1.09109         osd.11       up  1.00000          1.00000
12  1.09109         osd.12       up  1.00000          1.00000
13  1.09109         osd.13       up  1.00000          1.00000
14  1.09109         osd.14       up  1.00000          1.00000
-5  5.45547     host ceph04
16  1.09109         osd.16     down        0          1.00000
17  1.09109         osd.17     down        0          1.00000
18  1.09109         osd.18     down        0          1.00000
19  1.09109         osd.19     down        0          1.00000
15  1.09109         osd.15     down        0          1.00000

首先，自上次CentOs更新以来，我们无法同步第四台服务器。在其他服务器上，更新后没有问题。 我们尝试与以下对象同步：

• nodown

  选项
• 运行虚拟机
• 停止的虚拟机
• 更换硬盘
• 更换硬盘插槽

有人有重新同步的想法或线索吗

实际上，我们正在考虑为服务器ceph04重新安装CentOS

其次，我们要更新集群。是否可以在不中断集群使用的情况下（在VM打开的情况下）执行此操作

更多信息

• 操作系统：

  CentOS Linux 7.7.1908版（核心版）

• CEPH版本：

  10.2.11

• 有些机器具有大的磁盘访问权限

其次，我们要更新集群。是否可以在不中断集群使用的情况下（在VM打开的情况下）执行此操作

是的，有可能。但我们最终决定关闭所有虚拟机以加快同步。更新会相对较快地完成这项工作

有人有重新同步的想法或线索吗

这是iptable的一个问题。更改iptable规则后，同步再次开始