Routine Load之Ocurrs time out with specfied time 5 SECONDS问题

fe.warn.log 不间断报如下异常,不影响RoutineLoad正常运行,数据暂时未发现丢失
2022-03-07异常


2022-03-08异常

其中截图中涉及的RountineLoad信息,其中kafkabroker配置是ip地址,配置了3台

其中截图中涉及的RountineLoad消费信息,生产和消费是正常

这种异常要如何处理,感觉像fe和be的通信超时导致,有什么优化方案?感谢

补充:以上是举了一个RoutineLoad做例子,异常里面其他Rountine Load不间断也会有同样的问题
当前be集群:8core64G3台,共起来13个RoutineLoad任务,且只有RoutineLoad任务
fe当前为一台:16core*64G

麻烦您发下报错时间段的be的日志,be.out\be.war 排查下日志看是否有kafka断开的相关信息

你好,be日志这边是正常的,没发现与kafka断开的连接的,我们这个目前是在线上环境的,kafka和starrocks的网络是正常的,异常是一只存在,看截图2021-03-10 11:17今天仍然在发生的


对应的be时点的be日志11:14 ~11:18日志

starrocks是什么版本?

StarRocks2.0.1 2021-03-10 我们升级到 StarRocks2.1.1 异常依旧,但Rountine Load任务是不受影响的,数据也正常消费!

这个有两个原因: 1. be压力比较大,处理不了fe发来的请求。2. 读kafka最新的offset超时。你能看看be的日志里有关于kafka的报错吗