【详述】Flink同步到SR的时候,删除操作我们发现有偶发性的情况,有时候业务库做了delete+insert后,在SR中有时候可以触发删除操作,有时候却不触发删除操作,导致数据量多。
【背景】业务库delete+insert
【业务影响】影响较大
【StarRocks版本】2.1.2
【Flink Connector】1.16
【集群规模】3个fe(3个 FE节点)+7 个be(7个BE节点)
【机器信息】CPU虚拟核/内存/网卡,32C/64G/万兆(2个节点128G,其他节点64G)
【附件】
mysql语句
FlinkSQL source语句
FlinkSQL sink语句
FlinkSQL insert语句
Starrocks语句