Apache Doris 中文技术论坛
Questions Tags Users Badges

导出数据到Minio上,文件大小受限,最大为2G,超过则会被切割成多个文件

Asked Dec 25, 2024 Modified Dec 25, 2024
Viewed 124
ingestion 2.0 demand

image.png
image.png

edited Dec 25, 2024
Sol.7
asked Dec 25, 2024
1 Answers

目前最大只能支持2g

max_file_size: 单个文件大小限制,如果结果超过这个值,将切割成多个文件,max_file_size 取值范围是[5MB, 2GB], 默认为 1GB。(当指定导出为 orc 文件格式时,实际切分文件的大小将是 64MB 的倍数,如:指定 max_file_size = 5MB, 实际将以 64MB 为切分;指定 max_file_size = 65MB, 实际将以 128MB 为切分)

edited Jan 1, 1970
黄海军@SelectDB4918
answered Dec 25, 2024
Related Questions
如图中所示,我1fe 2be,测试2000万行0.2G数据,导出文件不会分散在多个节点上,enable_parallel_outfile也开了,是有什么条件吗?
1 answers
stream load的时候不支持自定义agg_state函数
3 answers
如图,max_byte_per_task这个参数不是默认值9G吗,为什么官网写100G呢?还是说100G是最大值?
java 频繁操作数据库 一直报pparent connection leak detected怎么解决
1 answers
通过 finkcdc 同步mysql数据到doris【3.0.4、3.0.5】,报错 fail to apply alter column type event,3.0.3没有问题
1 answers
broker load大表导数较慢
1 answers

Terms of service Privacy policy

Powered by Answer - the open-source software that powers Q&A communities.
Made with love © 2025 Apache Doris 中文技术论坛.