DorisDB-SE-1.15.0 Release Notes

1.15 版本功能

New Feature

  • 支持create table like语法 (文档地址
  • DataX插件DataX-DorisDB-Writer,方便各种数据源导入DorisDB(文档地址

Improvement

  • 优化stream load/broker load parquet格式/kafka routine load(通过向量化重构了导入流程,性能提升3-7倍,默认关闭,可以在命令行用admin set frontend config(“enable_vectorized_file_load” = “true”); 开启)
  • Cross Join性能优化,右边较小的场景中,性能平均提升5倍以上
  • Stream load 支持自定义行分隔符
  • Routine load调度优化,可以同时调度上千个routine load任务
  • 内存统计优化并修复若干场景OOM问题
  • Datagrip兼容性完善

Bugfix

  • 修复谓词条件为BOOLEAN类型使用false和0结果不一致的问题
  • 修复stream load 高并发导入报too many open files,导致be down的问题
  • 修复Hive外表count distinct内存管理和scan的若干问题
  • 修复若干其他稳定性bug