升级 ceph (16.2 -＞ 18.2) ceph mon 启动失败

ceph 升级后, ceph mon 启动报错:

Dec 31 12:55:11 server ceph-mon[15982]: 2025-12-31T12:55:11.930+0800 7f60570a3e40 -1 _open error initializing leveldb db back storage in /var/lib/ceph/mon/ceph-server/store.db
Dec 31 12:55:11 server ceph-mon[15982]: /builddir/build/BUILD/ceph-18.2.6/src/mon/MonitorDBStore.h: In function 'void MonitorDBStore::_open(const std::string&)' thread 7f60570a3e40 time 2025-12-31T12:55:11.930993+0800
Dec 31 12:55:11 server ceph-mon[15982]: /builddir/build/BUILD/ceph-18.2.6/src/mon/MonitorDBStore.h: 635: ceph_abort_msg("MonitorDBStore: error initializing keyvaluedb back storage")

大致原因之前使用 level db，ceph 18.2 使用变为了 rocksdb。

恢复方法，通过 osd 信息重建 mon。

1. 使用 osd 上存储的信息重建 mon

ms=<directory>
mkdir $ms

for host in $host_list; do
  rsync -avz "$ms" root@$host:"$ms"; rm -rf "$ms"
  ssh root@$host <<EOF
  for osd in  /var/lib/ceph/osd/ceph-*; do
    ceph-objectstore-tool --data-path \$osd --op update-mon-db --mon-store-path $ms
  done
EOF
rsync -avz root@$host:$ms $ms; done

2. 重建 mon 存储

ceph-monstore-tool <directory> rebuild -- --keyring <keyring>

如果没有 keyring

ceph-monstore-tool <directory> rebuild

3. 替换

mv /var/lib/ceph/mon/<mon-ID>/store.db \
   /var/lib/ceph/mon/<mon-ID>/store.db.corrupted

4. 导出 mon

ceph-mon -i <mon-ID> --extrace-monmap /tmp/lastmap

5. 删除 mon ，注意 默认生成的 mon 无法启动，需要删除

monmaptool --rm a /tmp/lastmap

6. 重新添加 mon

monmaptool --add <mon-ID> <mon ip>:6789 /tmp/lastmap

7. 导入 mon

ceph-mon -i <mon-ID> --inject-monmap /tmp/lastmap

8. 启动 mon

systemctl start ceph-mon@<mon-ID>