forest 35

• asked Dec 5, 2024

在普通java 应用中 如何在数据不落盘的情况下使用stram loader

目前处理数据用的都是spark 或者flink，如果在普通java 应用中，需要插入数据到doris，如何在但是doris 官方不建议使用 jdbc insert ，那么如果在数据部落盘的情况下，直接从内存中写入到 doris（不先生成 csv 或txt）

2.1 storage catalog ingestion

0 votes

1 answers

61 views

huwei2055 1

• asked Dec 5, 2024

Doris Streamloader在workers参数不同时，成功导入的数据量不一致。

使用Doris Streamloader导入一个csv文件，目的表是明细模型表（Duplicate Key)，命令参数workers数量1和'>1'，导入表行数量有差异。都提示成功导入。 workes=1的结果 workers=2或者workers>1的结果

ingestion

0 votes

2 answers

77 views

fengjie 5

• asked Dec 5, 2024

rountine load 参数period_of_auto_resume_min 生效问题

请教一个rountine load的问题，有个参数period_of_auto_resume_min ，（自动恢复 Routine Load 的周期）默认是5分钟。我理解是当有任务被暂停了，系统会自动尝试使用RESUME ROUTINE LOAD 把它调度回来。 目前的情况，我手动通过数据问题，触发暂停了一个job。一直没有自动恢复。是还需要开启什么其它的参数吗？ doris 版本2.1.6。 CREATE TABLE data_test.iot_rawdata( id VA...

2.1

0 votes

1 answers

60 views

kokeng 1

• asked Dec 4, 2024

在fe.conf设置lower_case_meta_names =true没有生效。

根据官网提供的信息在fe.conf配置lower_case_meta_names = true,在第一启动初始化后，即可生效，之后库表列名将转为小写。但是做了此设置还是没有生效。

3.0

0 votes

2 answers

48 views

tri0mphe7 1

• asked Dec 4, 2024

doris docker-compose启动报错的问题&官方文档错误问题

首先文章中，docker-compose使用的是--net=host 模式，这个模式下端口是没办法映射的，因为网络环境，我需要把端口映射到特定端口，比如 8080:9030,这样子就会报错。 这是我现在的，这种情况下没办法端口映射，用docker run也是一样的。 {code...}

3.0

0 votes

1 answers

90 views

North Lin 35

• asked Dec 4, 2024

2.1.6物化视图刷新失败

物化视图任务空指针异常，错误堆栈： {code...} 物化视图表结构：

2.1

0 votes

1 answers

73 views

____ 23

• asked Dec 4, 2024

版本2.1.5 obs认证问题

文件在obs上。我已经填写了obs的地址obsv3.he-region-2.sgic.sgcc.com.cn，但是后台好像自己拼了一个地址mrs-obsv3.obsv3.he-region-2.sgic.sgcc.com.cn. 请问这个地址的对应ip在hosts中怎么配置呢 这个endpoint和accesskey 之前我写代码验证过是对的，或者说这个报错是其他的含义[捂脸] 这是我验证用的代码 可以跑通

2.1

0 votes

4 answers

81 views

____ 23

• asked Dec 4, 2024

版本不同的catalog kerberos认证

2.1.5以下的版本认证没问题，升级到2.1.6或2.1.7就认证报错，是不是源码有所改动啊 配置啥都没动，就是升级版本，回退到2.1.5 2.1.4就不报错可以查询hudi

2.1

0 votes

1 answers

52 views

ms.w 1

• asked Dec 4, 2024

请教一下各位大神，最新版本doris 3.0.2在大量跑数据的时候出现be挂掉，下面是be.out的报错日志

INFO: java_cmd /usr/java/jdk-17//bin/java INFO: jdk_version 17 StdoutLogger 2024-12-04 15:39:53,298 Start time: Wed Dec 4 15:39:53 CST 2024 INFO: java_cmd /usr/java/jdk-17//bin/java INFO: jdk_version 17 Java HotSpot(TM) 64-Bit Server VM war...

3.0

0 votes

1 answers

130 views

wdg 3

• asked Dec 4, 2024

如何优雅处理fe节点ip变更？

2.1.5版本，fe节点从10.1.0.1迁移到节点10.2.0.1，对于，fe启动方式为bin/start_fe.sh --daemon --metadata_failure_recovery，另外在fe中设置ALTER SYSTEM ADD FOLLOWER "10.2.0.1:9010";，能勉强让集群处于可用状态。但这的处理方式似乎不优雅。请问是否有更优雅的处理方式？

2.1 cluster

0 votes

1 answers

109 views