ocp提醒租户合并异常

[刘红伟]

【 使用环境 】生产环境
【 OB or 其他组件 】ob4.1.0
【 使用版本 】
【问题描述】
ocp提示ob集群主租户合并异常，9天未合并了。

点击清除异常，合并中，还是报错无法合并，中间提示服务器异常。

[王利博]

ocp日志和observer.log日志麻烦提供下呢。

[刘红伟]

observer.log.7z (2.8 MB)
ocp.log.7z (3.5 MB)

[阿绿]

请问手动合并可以成功吗？手动合并可以参考 OceanBase分布式数据库-海量数据 笔笔算数

[王利博]

当前磁盘是什么磁盘？
[2024-02-20 11:10:53.593605] ERROR detect_palf_hang_failure_ (ob_failure_detector.cpp:346) [15215][T1002_Occam][T1002][Y0-0000000000000000-0-0] [lt=13][errcode=-4392] disk is hung(msg=“clog disk may be hung, add failure event”, clog_disk_hang_event={type:PROCESS HANG, module:LOG, info:clog disk hang event, level:FATAL}, clog_disk_last_working_time=1708398647950638, hung time=5642832)
看像是磁盘问题。

[刘红伟]

@阿绿

OceanBase分布式数据库-海量数据 笔笔算数

没测试，不过ocp上面的不好使了

[刘红伟]

机器是虚拟机的，应该是虚拟的磁盘，这个有影响吗？

[阿绿]

可以尝试一下手动合并，看能否成功

[刘红伟]

好的，谢谢

[刘红伟]

登录的用户租户，执行的手动合并，提示是成功了，记录没查到。
这是怎么回事？

[Giant]

select * from __all_zone; 看下这个

[刘红伟]

@Giant

select * from __all_zone;

[阿绿]

上次11号开始的合并任务并未结束，一直在合并中。可以先参考这个帖子看看

如何排查合并慢问题

本文主要介绍慢合并问题的排查方法。 1、首先确定合并慢的是哪一台 OBServer。 a.执行以下 SQL 确定未完成合并的 Zone。 如果 merge_status 不为 IDLE，则表示该 Zone 未完成合并。 obclient> SELECT * FROM __all_zone; b.根据上述查询得到未完成合并的 Zone，检查其中 OBServer 的合并进度。 执行以…

[刘红伟]

@如何排查合并慢问题

Zone

好的，我试下

[刘红伟]

老师，执行SELECT * FROM __all_zone，上面的图片未显示merge_status这个字段啊。
排查不到那台机器的卡顿啊

[Giant]

可能较低的版本有

[刘红伟]

我们使用的是ob4.1.0版本，这个要怎么排查？
我这边在官方搜索了，没发现什么异常的，都是查询的是空
SELECT * FROM __all_zone WHERE name IN (‘merge_status’,‘all_merged_version’);

[Giant]

社区版看这个字典。但是您上面发的应该还是在合并中。并没有结束吧 。

现在查询下这个表看看是什么状态

[Giant]

select * from GV$OB_COMPACTION_PROGRESS; 这个信息贴下看看

[刘红伟]

OB_COMPACTION_PROGRESS.txt (246.1 KB)
daren租户.txt (106.5 KB)
经排查是204.3的节点在11号合并卡住了，如何能确定下那？