zzzz 11

• asked Sep 25, 2024

doris2.1.2版本，flink api和sql批量写入doris，3个批量参数不生效

需求：doris表有3个字段,id(int),age(int),name(string),采用主键模型,实现部分字段更新 下面以sql方式为例：api的也是一样情况 {code...} 3个参数设置后，依旧是任务执行，立马插入，日志没有明显的看出来有阻塞的情况。使用的是本地idea跑的，下面是日志打印： 2024-09-25 22:38:42,104 INFO org.apache.doris.flink.table.DorisDynamicTableSink - Send ...

2.1

0 votes

1 answers

134 views

zhangliang 1

• asked Sep 25, 2024

doris 2.1 执行一条删除语句后，后续所有查询报错

执行：delete from table_name where ip='ip' and info is null 其中info 字段是 variant 类型 再执行任何基于此表的查询都报错： failed to initialize storage reader. tablet=7439511, res=[E-1501][E-1501] Unexpected type when choosing predicate column ,type=35 0# dor...

2.1

0 votes

1 answers

31 views

记忆的重构 1

• asked Sep 25, 2024

升级到2.1.5后，偶然发生transactions有999个PREPARE的持续超过1个多小时还没结束，在线等

版本：2.1.5（从2.1.2升级过来的） 没有启用sys_log_verbose_modules，该配置行前面还是加了# 的默认状态 使用的语句大部分是向DUPLICATE模型表里使用INSERT OVERWRITE TABLE写入，如： INSERT OVERWRITE TABLE table1 PARTITION(p20240922) 少部分使用UNIQUE模型表是使用INSERT INTO写入，如： INSERT INTO table2 (...) SELECT .....

2.1

0 votes

1 answers

35 views

yckonnnnnn 11

• asked Sep 25, 2024

Doris表恢复

如图，我有两张一样的rds2 表被删除了，我只想恢复第一条，也就是tableid = 1063288的这张表，该如何恢复呢？之前都是按照表名进行恢复的，现在就是遇到了表名一样，只要恢复指定的表如何操作？

2.1

0 votes

1 answers

34 views

swiftlei 3

• asked Sep 25, 2024

请教: DORIS 2.1.6 如何在streamload中使用自定义函数(UDF)?

DORIS版本: 2.1.6 官方文档中说在 streamload 的列转换时支持使用udf，但在streamload中，使用udf会报Does not support non-builtin functions, or function does not exist的错误，具体运行条件如下： 1、http put streamload + basicauth方式，用户为root权限； 2、数据格式为 json (read_json_by_line = true 的模式) 3...

2.1

0 votes

1 answers

48 views

王艳忠 42

• asked Sep 25, 2024

2.1.6 INTO OUTFILE 多线程不生效

1、1fe 3be 环境 2、TPCH 生成的表 单副本 131M的数据 3、执行Sql语句 {code...} 6、fe 日志

2.1

0 votes

1 answers

42 views

leoleo 17

• asked Sep 25, 2024

2.1.6版本 doris 设置topn_opt_limit_threshold无效问题

尝试topn优化，设置topn_opt_limit_threshold的值，但是不管是设置0禁用还是大于默认1024的值都是会出现默认topn优化的情况，应该是设置的session没生效。 执行global和非gloabal都无效。 set global topn_opt_limit_threshold=10240; set topn_opt_limit_threshold=10240;

2.1

0 votes

1 answers

55 views

Henray0607 5

• asked Sep 25, 2024

聚合模型 设置 AggregationType

这里表述是不是不太对：user_id、date、age、sex应该是设置了AggregationType吧？ [https://doris.apache.org/zh-CN/docs/table-design/data-model/aggregate]

2.1

0 votes

2 answers

25 views

Fashion 3

• asked Sep 24, 2024

CCR跨集群同步导致带宽被占满

1.环境描述： Doris版本：2.0.8 ccr-syncer版本：2.0.3.9 2.场景描述： 为了做生产Doris灾备，搭建了目标集群，并通过ccr-syncer进行跨集群数据同步。 3.问题描述： 在创建完syncer任务进行数据同步时，会把网络带宽占满，进而影响其他业务的开展；将download_binlog_rate_limit_kbs设置为20480进行限速后，还是会打满网络带宽，100M的带宽大概会占用70M/s，请问如何解决这种网络带宽占用过高的问题？

2.0

0 votes

2 answers

122 views

FishMAN 13

• asked Sep 24, 2024

doris 2.1.6查询hudi表报错

查询普通parquet表没问题，查询hudi表就会报错，hudi版本是0.10.1，报错日志： {code...}

2.1

0 votes

1 answers

45 views