许鸿坤@Cisco 21

• asked May 23, 2024

Snapshot进行Restore过程中，多台BE发生OOM

在将6T的表进行restore的过程中，多台BE都出现了OOM的情况，是restore占用了太多内存。 有没有参数可以配置restore占用的内存限制，或者是否可以分批restore？ be-info.log的报错如下： daemon.cpp:245] [MemoryGC] start full GC, process memory used 3.39 GB exceed limit 86.40 GB or sys available memory 80.00 KB less...

2.1

0 votes

1 answers

93 views

MarinH 5

• asked May 23, 2024

【已解决】doris-2.0.4-rc05，使用jdbc批数据时候报错，而同样的代码，数据可以插入Mysql中

代码报错java.sql.SQLNonTransientConnectionException: Unknown command(27) doris fe中报错 2024-05-23 14:25:06,720 WARN (mysql-nio-pool-13041|2099417) [ConnectProcessor.dispatch():564] Unknown command(27)

2.0

0 votes

2 answers

224 views

JPWang 2

• asked May 23, 2024

Doris 2.0.4，从另一个Doris集群进行 Insert into 操作，报错：[INTERNAL_ERROR]UdfRuntimeException: get next block failed

使用 Multi-catalog，从 Doris 2.0.0 往 Doris 2.0.4 导入 1000w 条数据，报错如下 FE： {code...} 报错的原因可能和数据量有关，如果只导入100条数据，是可以正常写入的，另外经过多次尝试，导入语句从开始到报错的时间间隔为5分钟，是否和某些参数配置有关？ 请各位大佬帮忙解答一下

catalog ingestion

0 votes

1 answers

212 views

ixiaoyi93 3

• asked May 23, 2024

【已解决】Doris FE高可用疑问

FE是多个Follower进行选举出一个Master，通过官方文档得知 Web管理台可以通过 Nginx 代理实现高可用。在这里我有以下几个疑问： BE在创建之后或之前注册到FE中，在注册的时候需要指定 FE Master 地址。那么如果 FE Follower 发送高可用切换是否应用现有节点与 新选举的 Master 节点的通讯呢？ 如果FE Follower故障选举出新的Master节点，后续我在添加节点是指定新的Master 节点地址？ 如果FE Follower故障选...

catalog

0 votes

1 answers

242 views

Wanghuan 17

• asked May 23, 2024

【已解决】Flink Doris Connector Checkpoint 超时问题

环境介绍： Apache Doris 2.1.2-rc04 ， Flink 1.18.1 ，flink-doris-connector 1.5.2 问题描述： flink消费kafka 写入doris ， on yarn ，Application 模式提交，sink 端 writer 算子反压现象明显，Checkpoint 频繁超时。之前在flink 1.16 standalone 集群 ，apache doris 2.0.4 ，flink-doris-connector 1...

2.1 ingestion

0 votes

1 answers

320 views

flyzyh 3

• asked May 23, 2024

【已解决】查询时报错：work load group memory exceeded limit

进行一个稍微复杂一点的查询，发生报错： work load group memory exceeded limit 详细信息： errCode = 2, detailMessage = (...)[CANCELLED]work load group memory exceeded limit, group id:1, name:normal, used:8.82 GB, limit:8.42 GB, backend:.... cancel top memory used tr...

2.1 query

0 votes

1 answers

292 views

chyx018 7

• asked May 23, 2024

使用特殊语法做笛卡尔积，查询返回的数据量为不确定的值

问题描述： selectDB-2.1.2,当使用以下语法做笛卡尔积时每次查询返回的数据量都不一致 SQL如下（已脱敏）: {code...} 在我们的其他集群（doris-2.0.7版本）使用同样的SQL返回的数据量每次都一样 补充： 1.表的数据条数固定，都是三副本 2.都是unique模型

2.1 query

0 votes

2 answers

88 views

chyx018 7

• asked May 23, 2024

查询异步物化视图时排序报错并使集群down机

selectDB-2.1.2版本，在查询物化视图时排序报错 物化视图创建语句(脱敏后)： {code...} 问题描述： 当对此物化视图查询多个字段并排序时报错并使集群down机，报错信息如下： 当查询少数字段时并不报错 当将order by 的排序字段放进 distributed by hash() 中再进行多个字段的查询并排序时也不报错

mtmv 2.1

0 votes

2 answers

115 views

____ 3

• asked May 23, 2024

期望需求：异步物化视图支持日期分区及倒排索引

期望doris能支持以下异步物化视图构建能力，其中user_id在基表中为倒排索引，在异步物化视图也同样可配置倒索索引： {code...}

mtmv demand

0 votes

1 answers

117 views

yugunsung 117

• asked May 22, 2024

【已解决】stream load提示publish timeout查不到数据怎么排查？

版本：1.2.7 通过Stream Load将一个500M左右的parquet文件导入到doris，提示发布超时，过了1个小时还是查不到数据，怎么排查呢？ [PUBLISH_TIMEOUT]transaction commit successfully, BUT data will be visible later SHOW DATA命令查看Size不为空。

1.2

0 votes

1 answers

260 views