gztw 5

• asked Sep 12, 2024

重复数据导入Doris主键模型表，表会越来越大？！

场景：使用Seatunnel定时同步业务数据到Doris表（主键模型） 问题：使用Seatunnel同步数据（新增数据和一部分历史数据）到Doris后，根据Doris文档，相同记录导入主键模型的表，新记录会覆盖掉旧记录，但实际只是旧记录在内部被标记为逻辑删除，并未实际删除，从而导致表越来越大。那重复的数据导入Doris，Doris能否丢弃或删除记录，只保留最新导入的那条记录，以避免表越来越大的问题？

2.1

0 votes

2 answers

76 views

guozukai 7

• asked Sep 11, 2024

arrow-flight-sql 查询数据，返回的数据量和count的数据量每次都不一致

使用原生jdbc获取数据量10006。 arrow-flight-sql求的count和select数据的行数对不齐，且都小于原生jdbc获取的行数。 {code...} count: 第一次执行 第二次执行 select list count 第一次执行 第二次执行

2.1

0 votes

2 answers

84 views

doris小白 11

• asked Sep 11, 2024

Error updating database. Cause: java.sql.SQLException: errCode = 2, detailMessage = Insert has filtered data in strict mode.

mybatis生成的insert语句没有id，但是其他模块相同的代码可以插入成功

2.1

0 votes

2 answers

45 views

bdao 3

• asked Sep 11, 2024

冷备到aws s3 失败，报错刷屏

failed to cooldown, tablet: 1579026 err: [INTERNAL_ERROR]failed to upload to [http://xxxx.s3.us-west-1.amazonaws.com/xxxxx/lake/data/1579026/02000000000049048a4602d6a4ec61fc4d9cff119ee1e0a0_0_1574049.idx] : NoSuchUpload The requested file c...

2.1

0 votes

1 answers

30 views

guozukai 7

• asked Sep 11, 2024

Insert into xxxx values (?,?,?,?) 执行返回 errCode = 2, detailMessage = Unexpected exception: -1

FE由两个节点组成，一个是master，一个是observer 连接observer {code...} observer是不是不能接这样的insert。 如果想继续使用loadbalance，是不是只能把observer改成follower

2.1

0 votes

3 answers

107 views

maple 10

• asked Sep 11, 2024

2.1.0~2.1.5 doirs 欧拉操作系统 arm环境下 streamload任务写入导致集群be节点全部崩溃

2.1.5 版本be.out 日志 *** Query id: 734e1529e6398a7b-61eb705659bb3ab3 *** *** is nereids: 0 *** *** tablet id: 0 *** *** Aborted at 1726038016 (unix time) try "date -d @1726038016" if you are using GNU date *** *** Current BE git commit...

2.1

0 votes

1 answers

116 views

yckonnnnnn 11

• asked Sep 11, 2024

Doris 如何更新表里面数据

如何支持：Duplicate 数据模型修改数据

2.1 2.0

0 votes

3 answers

88 views

nokichen 29

• asked Sep 11, 2024

[Bug]Insert field list is ambiguous

v2.1.5 {code...} 经测试 需要删除mv后 才能正常写入 而如果mv ddl里没有使用 where metric > 0，新增列之后 则不会出现上述写入失败的情况

2.1

0 votes

1 answers

35 views

今晚打老虎 13

• asked Sep 11, 2024

doris同步mysql的DDL语句：增加字段失败

背景 使用flinkcdc同步mysql表，并使用SchemaChange 数据流 (JsonDebeziumSchemaSerializer)同步mysql表的DDL语句。 doris版本 2.1.0 问题 当有mysql表table1 执行命令 {code...} 实际上table1表里面是有数据的（而且有的表执行add又能成功），请问下各位大神，有没有遇到并解决这个问题的？

2.1

0 votes

2 answers

65 views

____ 7

• asked Sep 11, 2024

doris版本2.1.2稳定版 ,内存溢出怎么处理好

Caused by: java.sql.SQLException: errCode = 2, detailMessage = (11.224.0.177)[CANCELLED]Process has no memory available, cancel top memory used query: query memory tracker <Query#Id=2cc3f81cc1164836-9ebd1f0d3b3ae8ef> consumption 3.73 ...

2.1

0 votes

2 answers

165 views