zlhxxx 170

• asked Oct 30, 2025

Doris 3.1 存算分离 导入性能

存算分离 3FE 4BE，每个16c64G，挂两个500G的ESSD，使用默认配置。 用4台机器作为客户端，每个搞5并发 每个客户端每次都先生成15000条数据（耗时1s），再并发提交，用部分列灵活更新导入（耗时1.2s左右，偶尔有几个2,3s）， 持续5分钟。 结果： cpu到65% ~ 80%， 内存 45%左右， IO 60%左右, 一共写入750w，每条数据100列，表是600列。 有调优的空间吗，能否维持在这种资源使用比例的情况下，稳定或者导入更多数据？

decoupled partial-update ingestion

0 votes

2 answers

77 views

lllll 1

• asked Oct 30, 2025

Flink Doris Connector同步PostgrSQL数据到Doris

Flink Doris Connector同步PostgrSQL数据到Doris中，PG库中的分区在Doris中会被创建为一个单独的表，能采集到一张表中吗？如果Doris中没用PG分区对应的单独表，数据是没法采集过来的。

operator

0 votes

1 answers

18 views

upper 3

• asked Oct 30, 2025

关于VARCHAR(M)里将M长度配置从字节转为字符计数问题？

doris 2.1的文档中明确说明：变长字符串是以 UTF-8 编码存储的，因此通常英文字符占 1 个字节，中文字符占 3 个字节。但是业务上的数据库很多都是设置的字符计数。 doris的VARCHAR(M)里M的计数规则要是能配置为字符计数会为数据接入提效，但是查了资料没找到这样的配置，不知道有没有这样的配置？

2.1

0 votes

1 answers

24 views

ll 3

• asked Oct 30, 2025

Azure Blob数据源支持

参考文档： [https://doris.apache.org/zh-CN/docs/3.x/data-operate/import/data-source/azure-storage] 版本 3.1.2 问题1 使用如下配置： {code...}

catalog 3.1

0 votes

1 answers

31 views

ll 3

• asked Oct 30, 2025

Paimon catalog 数据不刷新

问题 使用Paimon catalog 查询外部paimon表，表中数据更新后查询不到最新数据，必须要手动refresh catalog 或者等10分钟后catalog缓存自动刷新之后才能查询到最新数据。 相关配置 paimon表：无分区，无表结构变更 external_cache_refresh_time_minutes：10 external_cache_expire_time_seconds_after_access：86400 数据缓存 enable_file_cac...

3.0 catalog 3.1

0 votes

1 answers

59 views

silver 1

• asked Oct 30, 2025

最近doris总是一起宕机报错:[INTERNAL_ERROR]Could not find local receiver for node 1 with instance没有更多的报错信息 请问大佬们知道具体原因吗？

doris具体报错信息:W20251030 00:31:53.156773 22923 status.h:412] meet error status: [INTERNAL_ERROR]Could not find local receiver for node 1 with instance 10aea4c16e1d43f5-97f0967f21d529f4 {code...}

cluster

0 votes

1 answers

26 views

yunsur 3

• asked Oct 30, 2025

Doirs 创建表超时导致无法创建成功问题

数据库版本 show backends; show frontends; be_custom.conf {code...}

2.1

0 votes

6 answers

92 views

AT 1

• asked Oct 29, 2025

Doris4.0部署在麒麟V10系统上，3FE和3BE。相同的配置系统。就有一个BE启动失败

Doris4.0部署在麒麟V10系统上，3FE和3BE。相同的配置系统。就有一个BE启动失败 报错信息： ava HotSpot(TM) 64-Bit Server VM warning: Option CriticalJNINatives was deprecated in version 16.0 and will likely be removed in a future release. WARNING: sun.reflect.Reflection.getCalle...

cluster

0 votes

1 answers

30 views

guanweihong 1

• asked Oct 29, 2025

Logstash写入doris表偶发报错 detailMessage = Label [xxx] has already been used

doris版本：3.0.7 问题描述：Logstash通过stream load写入doris表中，并发量大的时候偶然会出现报错，detailMessage = Label [xxx] has already been used，导致导入失败。标签是由doris-logstash插件自动生成的，规则是logstash_{表名}{时间戳}{随机的uuid}_{随机数}，理论上不会出现重复。想问一下是否有可能是因为上一次streamload在某一个阶段的执行时间超时，导致数据重放...

3.0 ingestion

0 votes

1 answers

18 views

21

• asked Oct 29, 2025

3.1.2 recycler数据不回收，求教

从2025-10-25日晚从3.0.4升级至3.1.1版本，2025-10-27日发现数据不回收情况； 基本上不回收或者少量回收，硬盘空间持续攀升； 2025-10-28 升级至3.1.2 还是出现不回收 2025-10-29日早上，我远程断点了下RE后，则开始疯狂回收； 谁能够告诉这个是什么原因导致的？ 是数据删除标记问题？会不会是doris_meta结构升级？ 日志已经被清理掉了； 日志打印的是这行

3.1

0 votes

2 answers

50 views