North Lin 35

• asked Apr 24, 2024

【已解决】spark connector报spark type is DATETIMEV2, but arrow type iS TIMESTAMPMICRO

doris版本：2.1.1 spark connector版本：spark-doris-connector-3.2_2.12：1.3.0 问题描述：doris从2.0.x升级到2.1.x后，datetime类型读取失败

2.1

0 votes

1 answers

501 views

changguowei 199

• asked Apr 24, 2024

【已解决】Doris冷热分层策略调整后，现有上云数据是否会写回到BE节点本地磁盘上

{code...} 近五天的数据会从oss重新落到本地磁盘上吗？

2.0

0 votes

1 answers

90 views

changguowei 199

• asked Apr 24, 2024

【已记录】Doris导出ORC文件，Hive查询报错

EXPORT和SELECT INTO OUTFILE 导出的 ORC 文件，Doris查询 hive catalog 没问题，Doris 执行 select from S3 也没问题。 但是hive查询报错ORC报错，只导出一个字段(varchar类型)，hive查询也报相同错误。 split generation failed with exception: java.lang.ArrayIndexOutOfBoundsException: 6

ingestion

0 votes

1 answers

125 views

changguowei 199

• asked Apr 24, 2024

【已记录】doris数据上云后，远程清理问题

数据表是设置存储策略为1小时前数据都上云，这个tablet下当时我数据写重了（红框内的数据），然后执行了delete from table_name where dt = '2024-02-11'，又执行了insert into到这个分区的操作，现在一天过去了，云上delete的数据没有被真正删除掉，这个应该算是doris的bug吧 FE参数为 catalog_trash_expire_second = 600 BE参数为 trash_file_expire_...

cluster 2.0

0 votes

1 answers

147 views

bin4121 13

• asked Apr 24, 2024

【已解决】关于 regression 数据源问题

测试集： regression-test/suites/index_p0/load.groovy file """${context.sf1DataPath}/regression/bitmap_index_test.csv""" 报错：找不到bitmap_index_test.csv文件，请问哪里找这个csv文件？

1.2

0 votes

2 answers

168 views

____ 5

• asked Apr 24, 2024

【已解决】doris BE三个节点，有两个经常OOM

Doris 使用环境：生产上线 ，1fe 3be Doris 版本：1.2.7 问题描述： 三个be节点，有两个经常OOM，另外一个没有挂过，该怎么排查这个问题？三个be 的tabletnum 也很均衡。 操作系统：Kylin 机器配置： CPU 核数：32 内存：64G 磁盘：3T

1.2

0 votes

1 answers

96 views

changguowei 199

• asked Apr 24, 2024

【已记录】routine load任务如何平滑迁移到其他用户下

现有routine load任务是用root创建的，root可以使用所有资源组的资源，但是现在只想让routine load任务运行到指定资源组中，所以需要切换用户，所以doris能否平滑迁到别的用户下（drop重建routine load，kafka groupid消费位点会重置）

ingestion demand

0 votes

1 answers

122 views

Roger 19

• asked Apr 24, 2024

create table ddl出现NullPointerException

同样的DDL，在测试环境使用mysql client建表没问题 上生产环境用同样的DDL就出现以下错误 ERROR 1105 (HY000): NullPointerException 两边环境都是一样的doris版本2.1.1，透过helm k8s部署 唯一不一样在于生产环境是3 fe 3 be，而测试环境为1 fe 1 be DDL去掉敏感资料如下 {code...} 请问哪边有问题呢？感谢!

2.1

0 votes

1 answers

92 views

changguowei 199

• asked Apr 24, 2024

routine load任务是否会调度到其他资源组？

按照下图，我的集群里有三个资源组，有一张表有三个副本，分别在group_a、group_b和group_c。 假设user1只有使用组group_a资源的权限，我用user1创建的routine load任务只会在group_a资源组中生成任务接入kafka数据，并将数据只写入group_a中的副本中吗？ 其他两个资源组的中副本是不是只会自动从group_a资源组中的副本同步到当前资源组中的副本中？

2.0 docs

0 votes

1 answers

101 views

changguowei 199

• asked Apr 24, 2024

【已记录】新BE节点如何在加入集群前就打好tag

新加入BE Resource Group默认为"tag.location" = "default"，此时一加入集群，就有tablet去往新机器上移动，能不能做到加入集群前tag.location就已经打好不是default呢？

demand

0 votes

1 answers

64 views