Xuefeng_Feng 15

• asked Jul 9, 2024

利用doris构建实时/离线一体的数仓中如何实现实时维度拼接

较多的分享资料已经有公司分享利用doris构建实时/离线一体的数仓。由于doris不支持flink流式读取，对dwd层的实时生成，看分享文档有些 [通过SQL调度，有些是借助kafka实现] ，是否有更好的方式来实现，还是需要借助支持流式读取的组件，将维度拼接后的数据写入doris表中？

2.1

1 votes

1 answers

131 views

leiwei 3

• asked Jul 9, 2024

【已复现】doris用mysql驱动执行Statement.executeQuery(sql),返回的Field没有库表信息

doris用mysql驱动执行Statement.executeQuery(sql),返回的Field没有库表信息

query 2.0

0 votes

1 answers

101 views

小灰灰8512 5

• asked Jul 9, 2024

【缺少关键信息】be宕机后启动报错：inc rowsetid is too large

inc rowsetid is too large:72057594037927936

1.2

0 votes

1 answers

58 views

BingzZ 11

• asked Jul 8, 2024

【已解决】Doris中VARCHAR(M)类型，M的大小对性能有影响吗？

从Hive导数据到Doris，Hive中字段类型是String不确定字符串的长度，Doris字段设置了VARCHAR(255)但是有时候实际的长度会超过255导入会报错，所以想着Doris中VARCHAR直接设置为最大长度，不知道对性能有没有影响？

2.1

0 votes

1 answers

264 views

BingzZ 11

• asked Jul 8, 2024

Spark大批量数据写入Doris报错err=[E-235]failed to init rowset builder

30亿条数据，50w每个批次写入报错，如何优化呢？ {code...}

2.1

0 votes

2 answers

405 views

yugunsung 117

• asked Jul 8, 2024

agg模型表in子查询jdbc catalog很慢

版本：2.0.12 in子查询是查询jdbc catalog里面的一个表，数据量只有十几万，如下查询要8秒左右 {code...}

2.0

0 votes

1 answers

72 views

一粒尘埃 15

• asked Jul 8, 2024

【已解决】能在 springboot 里对 doris 主键表做类似银行转账失败事务回滚吗？

如果目前不能，有没有相关的实现计划？

2.1

0 votes

1 answers

96 views

丽丽哥哥 11

• asked Jul 8, 2024

doris2.1版本中variant数据类型数据集

请问doris官方测试中，数据集的链接可以提供下吗 clickbench数据集中的数据貌似不适合建variant类型的数据表，数据是单层嵌套的json格式，如何做数据比对呢。

2.1 storage

0 votes

1 answers

66 views

albert 13

• asked Jul 8, 2024

明细模型表执行批量删除DELETE FROM xxx where xxx IN()，事务提交成功，但是数据一直没有被删除，这个问题该怎么排查

Version: doris-2.1.2-rc04 1、明细模型表执行批量删除操作 DELETE FROM h867044.dwd_event_WlydRelease WHERE part_date >= '2024-06-24' AND unique_id in (5102235210004, 5102235210003, 5102233710001, 5102233610001, 5102232610004, 5102232210004); 2、事务...

2.1

0 votes

1 answers

123 views

king.wang 1

• asked Jul 8, 2024

12G内存分配给BE 经常会报错

如下错误: process memory used 4.92 GB exceed limit 10.80 GB or sys available memory 1.19 GB less than low water mark 1.20 GB 请问一下可以 调整 sys available memory 或者说是 low water mark的值吗？ 使用 镜像信息如下: selectdb/doris.k8s-operator:1.5.2 selectdb/doris.be-u...

catalog

0 votes

2 answers

106 views