我们的数据写入在时间上很分散,可能一秒中一两条,为了保证数据的实时性,BatchIntervalMs不能设置太高,这样的话提交频率就会比较高。但是VisibleVersion好像有个版本限制,超过500就不让写数据了,请问这种情况有什么优化手段吗?
interval建议在10s以上,目前不支持太低频率的导入
我们设置的20S,但是即使这样,一天也会有4320个version
这个version是没有限制的吧
我们的数据写入在时间上很分散,可能一秒中一两条,为了保证数据的实时性,BatchIntervalMs不能设置太高,这样的话提交频率就会比较高。但是VisibleVersion好像有个版本限制,超过500就不让写数据了,请问这种情况有什么优化手段吗?
interval建议在10s以上,目前不支持太低频率的导入
我们设置的20S,但是即使这样,一天也会有4320个version
这个version是没有限制的吧