替换整个集群机器后重启拉起归档失败

问题现象

日志告警中，报错日志刷屏。

查看集群备份任务失败。

查看 observe.log 日志，频繁出现如下错误。

关键诊断信息

触发条件

需同时满足下列 3 个条件。3 个条件之间有依赖关系，前一个条件满足后再看下一个条件是否满足。

1. 曾经开启过归档到 oss，且后来停止了归档。

2. 做过替换整个集群机器的操作。

   1. 新增一批节点。
   2. 将所有 unit 从旧节点迁移到新节点。
   3. 下掉所有旧节点。

3. 重新开启归档。

事后诊断

日志中有 get backup dest failed 的 ERROR 日志，错误码为 -4334。

Unexpected internal error happen, please checkout the internal errcode(errcode=-4334, file="ob_archive_service.cpp", line_no=406, info="get backup dest failed")

问题原因

迁移系统租户的 unit 时，部分元信息没有同步到新机器，导致归档的地址无法解码。

问题风险及影响

归档任务卡住且无法停止。

影响版本

OceanBase 数据库 V4.2.1 BP2 及之前的 V4.2.1 版本。

解决办法及规避方式

解决方法

联系技术支持人员处理。

规避方式

由于触发条件 1 和 2 都是不可逆的，需要对不同情况使用不同的规避方法。

• 当触发条件 2 不满足时：

  • 升级到问题已修复版本，目前已经修复该问题的版本包括 OceanBase 数据库 V4.2.1 BP3 及其之后版本。

  • 磁盘扩缩容期间保持归档开启。

• 当触发条件 2 已经满足时，则无法通过升级解决，只能在重新开启归档前，联系技术支持人员来协助规避。