海边看花开 29

• asked Jun 14, 2024

Doris2.1版本 使用spark connector写入 doris，dataframe中字段与doris中字段个数不一致，怎么处理

2.1

0 votes

1 answers

35 views

caopengbo 5

• asked Jun 14, 2024

查询时偶尔报错ERROR 1105 (HY000): errCode = 2, detailMessage = (192.168.7.185)[CANCELLED]copy_column_data_by_selector nullable mismatch

查询语句 select * from ( select MD5( concat( byslxz, '|', u_b_ysz ) ) as rvid, MD5( concat( ayslxz, '|', u_a_ysz ) ) as targetId, concat( ayslxz, '-', u_a_ysz, byslxz, '-', u_b_ysz, '-', relationship ) as...

2.1

0 votes

1 answers

75 views

hanson 11

• asked Jun 14, 2024

mysql load数据NULL值问题

这边参考以上文档，将导出文件中NULL值都替换为 \N ，导入doris后，使用字段 is null 写法，无法查询。但是换成 字段 = ''，则可以查询。 请问这个导入的数据怎么保持NULL值不变，因原系统中的SQL写法是用字段 is null来查询的。

2.0

0 votes

1 answers

23 views

lili 3

• asked Jun 14, 2024

【已解决】Doris 2.0.4，be 节点报错：Array of size is too large to be manipulated as single field

Doris 2.0.4 在使用Aggregate模型的时候，不小心使用了Array类型，并且Array列设置为了REPLACE方式聚合 运行一小段时间，即出现be节点崩溃 现在be节点始终无法正常启动，报错信息： F0614 10:06:43.028738 69037 column_array.cpp:179] Array of size 18446744073709551601 is too large to be manipulated as single field, ...

cluster 2.0

0 votes

1 answers

54 views

su 3

• asked Jun 14, 2024

Doris 2.0.6版本数据目录大小和实际磁盘占用不符

如图所示，/data 目录 doris的BE数据大小为184G.但是df -hT 显示使用了390G 执行lsof | grep delete 语句后发现doris_be 持有大量回收站中已删除数据的句柄 {code...}

2.0

0 votes

1 answers

61 views

Sean 5

• asked Jun 14, 2024

【已解决】启动数据复制后，Doris 3个BE节点中的2个出现了崩溃的情况，且无法再重新启动

Doris 3个FE和3个BE节点（操作系统都是centOS 7），初始安装后可以启动，但后续使用中，当把表的复制参数设置为2或3，然后往表内插入数据，Doris 3个BE节点中的2个出现了崩溃的情况，且无法再重新启动，这个问题已经出现过两次（第一次是把2个BE节点删除了重建解决的）。be.out的报错如下： start time: Thu Jun 13 23:47:02 CST 2024 INFO: java_cmd /data1/jdk1.8.0_202//bin/jav...

2.1

0 votes

2 answers

86 views

yuangang 1

• asked Jun 14, 2024

从2.0.3升级2.1.3之后原来2.0.3正常跑的任务，在2.1.3上失败

一共3个be节点，单台内存512G，mem_limit=40%，原来为hive表，数据量7亿，hdfs占用空间253G，全量执行直接报错如图 3，只占用其中一台机器的内存 图1 图2 图3 执行任务的时候，只占用其中一台的内存，doris manager内存监控如图

2.1

0 votes

2 answers

132 views

____ 7

• asked Jun 14, 2024

Doris 2.0.10 在查询高峰的时候，有10%的QueryId Timeout

报错如图： timeout when waiting for send fragments rpc, query timeout:14400

2.0

0 votes

1 answers

29 views

____ 3

• asked Jun 14, 2024

我在Clickhouse中的SQL使用呢DictGet来关联一些纬度数据，应当如何迁移到Doris中？

我在Clickhouse中的SQL使用呢dictGet来关联一些位于字典表中的纬度数据，最近在调研数据迁移到Doris中，不过根据查阅文档，Doris中应该是没有直接对等的功能。 主要问题 所以迁移到Doris中最佳实践是替换为Join？或者是否有类似的其它方案？ 场景咨询 我的一个场景是，纬度表中存放了IP与一些数据的映射关系，clickhouse中，在SQL查询阶段，会通过数据的IP字段，利用DictGet函数，来将数据关联到到查询结果数据上。经过查阅文档，Doris应该...

query

0 votes

1 answers

46 views

ncepulcy 1

• asked Jun 14, 2024

聚合表后台compact问题

默认可能十个文件compact一次，假设我实时写入一天，最后几个文件不到十个，他没有触发compact，这个时候在读取时发生读时合并，性能受影响，该怎么优化。

2.0

0 votes

1 answers

41 views