starrocks流式导入提示批量导入大小超限

使用json格式作为http请求体,导入starrocks报错,请问ignore_json_size这个参数怎么设置呢?

The size of this batch exceed the max size [104857600] of json type data data [ 118170895 ]. Set ignore_json_size to skip the check, although it may lead huge memory consuming.

这块咱们是什么版本的呢?

verison 2.1.4

这个问题可以升级解决呢

朋友们,今天是个特别的日子,StarRocks 最新版本 2.2.0 正式发布啦!:tada:包括资源隔离,Java UDF,JSON,update, Apache Hudi 外表等一系列新功能。快来了解 & 试用!:point_down:

1、Release notes:

2、2.2 版本下载地址:
https://www.starrocks.com/zh-CN/download/community

3、GitHub: github.com/StarRocks/star rocks(支持 StarRocks,请大家动动手点亮:star2:!)
B站:关注“StarRocks_labs”
微信公众号:“StarRocks”
官网:https://www.starrocks.com/zh-CN/index

4、如您希望了解企业版,请咨询:StarRocks 小助手(微信号:StarRocks-1)

升级到哪个版本呢

可以试下2.2.

那请问下配置文件中有没有设置该值的参数呢,升级到2.2之后就没有数据量限制了吗?

Flink 可以在sink时加上 sink.properties.ignore_json_size = true忽略限制,但通常不建议修改。
Stream Load里写法为:-H “ignore_json_size:true”

我们采用的是http的方式导入的,这个怎么设置呢,是设置到请求头里吗

这个问题解决了吗,我也想只到通过http方式同步的怎么来配置,-H “ignore_json_size:true”这个参数呢

请问通过官网的java代码用HTTP方式同步时候,代码中要怎么配置-H “ignore_json_size:true”这个参数呢

您好2.2没有限制的

现在使用的是2.2版本,是不用配置-H “ignore_json_size:true”相关参数的吗,2.2版本是放开这个配置了吗?

是的呢 :grinning:。这块ignore_json_size参数设置在header也是可以的呢。

最新2.4.1 flink导入也有这个问题呢,请问如何修改

会有啥影响么???