OMS只进行增量同步，没有数据写入

OceanBase 技术问题
#1

【 使用环境 】生产环境
【 OB or 其他组件 】
OMS
【 使用版本 】
OB 4.3.0
MySQL 5.7.2
OMS 4.2.3_CE
【问题描述】
OMS进行增量同步一直没有数据写入

image
image1920×692 66.6 KB

CDC日志
text (1).log (1.3 MB)

【复现路径】问题出现前后相关操作
【附件及日志】推荐使用OceanBase敏捷诊断工具obdiag收集诊断信息,详情参见链接（右键跳转查看）：

【SOP系列 22 】——故障诊断第一步(自助诊断和诊断信息收集)

#3

clog被清理了errcode=-4016
996 [2024-06-21 11:20:09.420626] EDIAG [TLOG.FETCHER] get_result (ob_log_start_lsn_locator.cpp:929) [54724][][T0][YD32A0A5818EE-0000000001500001-0-0] [lt=19][errcode=-4016] request start lsn from all server fail(tls_id={tenant_id:1004, ls_id:{id:1544}}, start_tstamp_ns=1718865102000000000, svr_cnt=54, svr_list_consumed=54, result_svr_list_idx=-1, svr_list=[{svr:“10.16.4.158:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000007553126-0-0}, {svr:“10.16.52.121:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-000000000746745B-0-0}, {svr:“10.16.4.182:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000006BC8BA7-0-0}, {svr:“10.16.52.97:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000007635060-0-0}, {svr:“10.16.7.30:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000006BC8BA8-0-0}, {svr:“10.16.8.119:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000007553127-0-0}, {svr:“10.16.8.159:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000006BC8BA9-0-0}, {svr:“10.17.11.224:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000007635061-0-0}, {svr:“10.17.11.157:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000007553128-0-0}, {svr:“10.16.8.94:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000006BC8BAA-0-0}, {svr:“10.17.11.248:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000007553129-0-0}, {svr:“10.17.16.224:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000007635062-0-0}, {svr:“10.17.16.249:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000007635063-0-0}, {svr:“10.17.19.120:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000006BC8BAB-0-0}, {svr:“10.17.16.225:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000006BC8BAC-0-0}, {svr:“10.17.2.161:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000006BC8BAD-0-0}, {svr:“10.17.19.96:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-000000000746745C-0-0}, {svr:“10.17.40.32:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-000000000755312A-0-0}, {svr:“10.17.2.184:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000007635064-0-0}, {svr:“10.17.19.121:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000007635065-0-0}, {svr:“10.17.42.249:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-000000000746745D-0-0}, {svr:“10.17.40.56:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000006BC8BAE-0-0}, {svr:“10.17.43.32:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000007635066-0-0}, {svr:“10.17.43.31:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000006BC8BAF-0-0}, {svr:“10.17.43.33:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-000000000755312B-0-0}, {svr:“10.17.57.224:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-000000000755312C-0-0}, {svr:“10.17.57.225:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000006BC8BB0-0-0}, {svr:“10.17.43.36:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-000000000755312D-0-0}, {svr:“10.17.57.248:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-000000000755312E-0-0}, {svr:“10.17.43.57:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000007635067-0-0}, {svr:“10.17.43.56:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-0000000007635068-0-0}, {svr:“10.50.54.155:2882”, rpc_executed:true, rpc_err:0, svr_err:0, ls_err:-9092, start_lsn:{lsn:18446744073709551615}, start_log_tstamp:18446744073709551615, trace_id:YD32A0A5818EE-000000000755312F-0-0}]) BACKTRACE:0x1e274c4d 0xe3fc8cf 0xe3fc461 0xe3fc0ca 0xe3fbebb 0xe6d04c0 0xe516530 0xe4a263a 0xe4a1a23 0xe4a0e78 0xe57bbcf 0x7f331a4ebea5 0x7f3319b05b0d