azeng 1

• asked Jan 20, 2025

日志场景下：完善官网的日志组件filebeat

因为每个公司日志格式可能存在差异化，从而需要有不同的标记 但是通过标记后，在filebeat配置文件，output阶段，table无法引用前置标记变量，期望完善filebeat组件，保证日志系统-doris版本的推广和可用性

3.0

0 votes

1 answers

71 views

梦白ver 3

• asked Jan 20, 2025

List分区能否做冷热数据分离

请问能否做到将List分区的表的部分分区的数据放到ssd盘中，将部分分区放到hdd盘中，不是放到外部存储

2.1

0 votes

1 answers

26 views

笑笑 1

• asked Jan 20, 2025

doris 2.1.7 执行show frontends 很慢，30秒左右

doris 2.1.7 执行show frontends 很慢，30秒左右，如果不配置DNS就执行的很快，但是不能访问外网域名了，如果配置DNS 就很慢。本地测试搭建的，用的都是ip+端口的形式，没有使用域名。请问有没有知道原因和解决方法的？

2.1 performance

0 votes

1 answers

79 views

小严同学 5

• asked Jan 20, 2025

x2doris官网有哪些版本？

请教一下。现在官网上下载x2doris只能下载不自带spark的版本吗？ 是不是意味着只能用自己安装的spark？ || 官网下载：https://www.selectdb.com/download/tools#x2doris

2.1 x2doris

0 votes

1 answers

76 views

shuozhang 7

• asked Jan 20, 2025

doris2.1.6编译失败

使用docker 编译，镜像是build-env-ldb-toolchain-latest，编译be失败，报错信息如下： [376/1360] Building CXX object src/service/CMakeFiles/Service.dir/internal_service.cpp.o FAILED: src/service/CMakeFiles/Service.dir/internal_service.cpp.o ccache /var/local/ldb-to...

2.0 compilation

0 votes

2 answers

68 views

terry.yang 1

• asked Jan 19, 2025

大表count(distinct x)计数报string column length is too large错误

DDL语句如下： CREATE TABLE ods_working_procedure_check_detail ( dim_id bigint NOT NULL, uid bigint NOT NULL, check_date datetime NOT NULL, proj_code int NULL, check_value float NULL ) ENGINE=OLAP UNIQUE KEY(dim_id, uid, check_date) DISTRIBUTED B...

3.0

0 votes

1 answers

43 views

____ 33

• asked Jan 17, 2025

3.0.3版本 fe 的gc日志，old regions一直增加

fe 最终被oom，gc后的内容一直处于增长状态。fe配置处于默认配置。fe配置为32u，64g。带3台be 16u 32g。 这是启动后的第一次gc截图： 这是存活一段时候后的gc截图 java不懂，所以是因jvm配置的启动命令问题？ JAVA_OPTS_FOR_JDK_17="-Dfile.encoding=UTF-8 -Djavax.security.auth.useSubjectCredsOnly=false -Xmx59392m -Xms59392m -XX...

3.0 cluster

0 votes

2 answers

105 views

seawenc 15

• asked Jan 17, 2025

2.1.7，集成带kerberos的hive查询报错NullPointerException

doris version: 2.1.7 当前环境有中两套带krb的大数据集群，一套是3.1，一套是2.1.1, 3.1版本的这一套集成没有任何问题， 2.1版本集成后，能查看各种元数据，但是执行查询就报null，可能是什么原因呢 {code...}

2.1 query

0 votes

1 answers

107 views

王卫光 3

• asked Jan 17, 2025

V2.1.7，Steam Load实时同步数据，采用Group Commit的异步模式(async_mode)，当BE节点出现宕机时，会出现部分数据丢失现象

集群环境：Selectdb 2.1.7 Flink实时消费Kafka数据，底层通过Stream Load同步到Doris表中，采用的是Group Commit的异步模式(async_mode) 当某些BE节点突然宕机时(偶尔大查询导致)，会出现部分数据丢失（发生异常的那个时间点），Flink taskmanager中也未出现任何异常错误，Flink代码中本身也做了错误重试，还是没效果。 丢失的数据一般几十条或者百来条样子。 --核心代码如下： {code...}

2.1 ingestion

0 votes

1 answers

101 views

jeffqu 3

• asked Jan 17, 2025

be 计算节点只有一个生效，numNodes总是等于1

0:VOlapScanNode(260) | TABLE: anfanapi.orders(orders), PREAGGREGATION: ON | PREDICATES: ((((status[#16] > 0) AND ((vid[#6] <= 100) OR (rid[#7] != 3))) AND ((vid[#6] NOT IN (100000260, 100000240, 100000230, 100000224, 100000207, 100000...

2.1

0 votes

1 answers

56 views