zhangxiaolong861 9

• asked Dec 5, 2024

doris2.1.7编译非bebug模式的BE成功后，启动报错:

doris2.1.7编译非bebug模式的BE成功后，启动报错: INFO: java_cmd /appcom/java/bin/java INFO: jdk_version 8 /appcom/DorisInstall/be/lib/doris_be: /lib64/libc.so.6: version `GLIBC_2.18' not found (required by /appcom/DorisInstall/be/lib/doris_be) 虽然可以在该节点...

2.1 compilation

0 votes

1 answers

88 views

vzrs 1

• asked Dec 5, 2024

虚拟化部署doris集群是否能使用共享磁盘文件部署

近期更换国产化平台，从传统VMware VSphere转到了国产超融合平台，部署doris时遇到了一个问题。 超融合架构底层分布式存储在创建虚拟机时默认了2~3副本模式，如果使用存算一体部署，最终存储容量使用为“Doris副本数*虚拟机磁盘文件副本数”，造成了过多的资源损耗。新版存算分离模式似乎比较符合需求，但额外搭建共享存储服务又回增加架构复杂度。 综上，想请问，存算分离模式中是否可以使用虚拟化平台提供的共享磁盘文件作为共享存储层使用，来搭建BE集群。感谢！！

decoupled

0 votes

1 answers

71 views

阿帅 144

• asked Dec 5, 2024

分区表中的自动分桶貌似没用

{code...} 表建成功后。查看DDL 默认生成了dynamic_partition.buckets" = "2"。 而且这个dynamic_partition.buckets 这优先级很高。 导致自动分桶进行了分桶预测，但被 dynamic_partition.buckets" = "2" 这个参数覆盖了。 如下图：

2.1

0 votes

1 answers

97 views

changguowei 199

• asked Dec 5, 2024

【已解决】Doris2.1.7 Ranger策略下载不到本地cache目录【BUG】

描述 1、2024-11-27号从Doris2.1.5升级到2.1.7后，发现Ranger权限下载不到Doris FE的cache目录了，Doris2.1.5版本还没有这个问题，这是BUG吗 2、但是新增策略权限后，hive beeline权限是没有问题的 现象如下 2024-12-05号新增了Ranger权限策略，上一次更新Ranger权限是2024-11-25号(是在升级之前) 显示Download下载日志 Doris FE的策略cache目录 最终导致查询没权限 Hiv...

2.1 permission

0 votes

1 answers

123 views

changguowei 199

• asked Dec 5, 2024

Doris2.1.7 Catalog权限没有控制住【BUG】

Doris版本：2.1.7 用户没有hive catalog权限，但是可以访问hive catalog下的库表，这是权限没控制住吧 查看用户权限 hive catalog创建语句如下 {code...}

2.1

0 votes

2 answers

164 views

zengyongchuan 31

• asked Dec 5, 2024

2.1.5，jdbc使用loadbalance后出现连接不上doris的现像

doris 2.1.5 jdbc 8.0 3个fe节点、3个be节点、fe和be 混合部署 应用程序使用 hikari 连接池，并使用 loadbalance 方式，如：jdbc:jdbc:mysql:loadbalance://172.xx.xx.xx:9030,172.xx.xx.xx:9030,172.xx.xx.xx:9030/db1?useUnicode=true&characterEncoding=utf8&allowMultiQueries=tr...

2.1 catalog

0 votes

2 answers

131 views

huwei2055 1

• asked Dec 5, 2024

Doris Streamloader在导入多个文件时，如何跳过每个文件的首行？

doris版本3.0.2 需求是目录下有多个同类型的文档，导入时需要跳过每个文档的首行。采用以下命令： doris-streamloader --u "bgusr" --source_file="hq*.csv" --url="http://127.0.0.1:8030" --header="column_separator:,?skip_lines:1" --db="database1" --t...

ingestion

0 votes

1 answers

91 views

forest 35

• asked Dec 5, 2024

在普通java 应用中 如何在数据不落盘的情况下使用stram loader

目前处理数据用的都是spark 或者flink，如果在普通java 应用中，需要插入数据到doris，如何在但是doris 官方不建议使用 jdbc insert ，那么如果在数据部落盘的情况下，直接从内存中写入到 doris（不先生成 csv 或txt）

2.1 storage catalog ingestion

0 votes

1 answers

71 views

huwei2055 1

• asked Dec 5, 2024

Doris Streamloader在workers参数不同时，成功导入的数据量不一致。

使用Doris Streamloader导入一个csv文件，目的表是明细模型表（Duplicate Key)，命令参数workers数量1和'>1'，导入表行数量有差异。都提示成功导入。 workes=1的结果 workers=2或者workers>1的结果

ingestion

0 votes

2 answers

88 views

fengjie 5

• asked Dec 5, 2024

rountine load 参数period_of_auto_resume_min 生效问题

请教一个rountine load的问题，有个参数period_of_auto_resume_min ，（自动恢复 Routine Load 的周期）默认是5分钟。我理解是当有任务被暂停了，系统会自动尝试使用RESUME ROUTINE LOAD 把它调度回来。 目前的情况，我手动通过数据问题，触发暂停了一个job。一直没有自动恢复。是还需要开启什么其它的参数吗？ doris 版本2.1.6。 CREATE TABLE data_test.iot_rawdata( id VA...

2.1

0 votes

1 answers

73 views