happyday_zhang 9

• asked Sep 23, 2024

doris利用自带routine load消费kafka，doris出现丢失数据的情况？

问题描述：当前doris版本为2.0.2-rc版本，采用doris自带的routine load进行消费kafka，kafka里面的数据格式是数组json串格式的，很明确的是数据已经发送到kafka中，但是在消费过程中丢失数据导致未入doris中。 官网声称是可以保证数据不丢失的，而且我们的数据模型是uqique模型，大佬有知道是什么问题导致的吗？就这个主题的表数据丢失数据，其他表目前没问题。

operator 2.0

0 votes

1 answers

79 views

Rick 7

• asked Sep 23, 2024

求帮助！2.0.11版本重启FE报错wait catalog to be ready. FE type: UNKNOWN. is ready: false, counter: 38

fe与be在同一台centos7.9机器上 docker-compose配置

2.0

0 votes

1 answers

39 views

nokichen 29

• asked Sep 23, 2024

前缀索引的生成粒度可以修改吗？

默认是1024行划分为一个RowBlock，进而生成一个前缀索引 请问1024行可以调整吗？

2.1

0 votes

1 answers

25 views

xhuang 5

• asked Sep 23, 2024

通过Manager升级Doris过程报权限不足

目的：通过manager将doris2.1.2升级到2.1.6。 现状：服务器只有一个根目录/，使用root在/目录下创建了meta_data和rdw_data并修改这两个目录的用户归属组为doris；使用doris用户安装doris、manager等组件并启用。 问题：在通过Manager升级Doris过程中，在“备份数据”这一步报错，日志提示如下： 2024-09-23 17:28:47.872 [WebSocketClient-AsyncIO-14] INFO c.s....

2.1 manager upgrade

0 votes

3 answers

113 views

testsjc 5

• asked Sep 23, 2024

doris 2.0.14中副本健康检查VersionIncompleteNum，ReplicaCompactionTooSlowNum，OversizeNum一直在变化是否正常

doris 2.0.14中副本健康检查VersionIncompleteNum，ReplicaCompactionTooSlowNum，OversizeNum一直在变化是否会影响spark dataframe数据查询， 要怎么优化集群配置 执行命令：SHOW PROC '/cluster_health/tablet_health';

2.0

0 votes

2 answers

93 views

zhangxiaolong861 9

• asked Sep 23, 2024

在访问的高峰期,QPS最高的时候，会出现查询慢的现象

Dors的BE审计日志中，出现了_rq is full, capacity=4096的日志 。发现几次出现该日志的时间点，也是出现查询慢的时间点。该队列是否是bRPC的服务中的队列，是否可以通过调大brpc_num_threads的数值,来解决偶尔查询慢的问题。 I20240923 08:27:10.242985 64853 pipeline_x_fragment_context.cpp:189] PipelineXFragmentContext::prepare|query...

2.1

0 votes

1 answers

113 views

echoLss 7

• asked Sep 23, 2024

使用group_concat(distinct split_part())，be报错，全部挂掉，版本2.1.3

执行了这样一个sql: select group_concat(distinct split_part(intelligence_content, ';', 1), ',') as high_risk_port from intelligence_application_model im left join intelligence_content_info ic on im.library_id = ic.library_id where m...

2.1

0 votes

3 answers

100 views

testsjc 5

• asked Sep 23, 2024

doris升级到2.0.14之后数据查询出现INTERNAL_ERROR] missed_versions is empty异常

spark-doris-connector版本1.3.2 客户端报错信息： {code...} 不知道这个tablet状态是否影响数据查询

2.0

0 votes

2 answers

123 views

guozukai 7

• asked Sep 23, 2024

使用查询时，查询计划未展示倒排索引使用信息

Version：2.1.5 使用查询时，查询计划未展示倒排索引使用信息。 建表语句： {code...}

2.1

0 votes

2 answers

28 views

文小誉123 15

• asked Sep 22, 2024

datax配置部分列更新，提示没有找到主健列，但已经有主键列

doris建表语句如下： CREATE TABLE IF NOT EXISTS test ( id LARGEINT NOT NULL , order_code VARCHAR(50), line_code VARCHAR(20) , remark VARCHAR(900) , unit_no TINYINT", unit_name VARCHAR(500) ", price VARCHAR(500) ", register_time DATETIME...

2.1

1 votes

1 answers

71 views