actcwlf 5

• asked May 21, 2024

【已解决】随机数据丢失问题

我在使用的时候发现有时候会出现随机的数据丢失问题，不知道是什么原因导致的 建表代码 {code...} 然后执行的操作是 批量插入20180101到最新日期的连续日期 每天定时插入当天的一个日期，例如在0点插入当天的日期 每个小时校验数据完整性，即检查过去30天是否有数据缺失，正常情况下应当为连续的日期 执行上述流程短至一天多至一周就会出现数据缺失的问题，大致缺失的情况如图 因为sql是其他框架产生的，我就把和这个表相关的audit_log导出了一下 [audit_log 可...

2.1 2.0

0 votes

1 answers

196 views

托马斯hbx 11

• asked May 21, 2024

【已解决】想问下fe master 和 follower的区别

RT，想知道FE的两种状态对于用户来说有什么区别？（比如master上能做什么操作而follower不能操作之类的）

2.1

0 votes

1 answers

151 views

WangZhonghui 1

• asked May 21, 2024

【修复中】admin clean trash 失败

doris版本：2.1.3 环境1fe 3be 执行命令：admin clean trash; fe返回结果：admin clean trash OK 时间: 0.001s 执行show trash查看结果。没有变化 查看be日志： W20240521 10:36:48.389319 7097 agent_server.cpp:281] failed to submit task|task=TAgentTaskRequest(protocol_version=V1, task...

2.1

0 votes

1 answers

117 views

Kevin.Shin 19

• asked May 21, 2024

Doris manager 集群->主机 页面刷新太快，看不清具体信息

集群->主机 页面刷新太快，看不清具体信息 http://managerhost:8004/3/operation/resource

manager

0 votes

2 answers

120 views

mcclone 25

• asked May 21, 2024

查询结果返回每次都不一样

一下这个SQL，每次执行返回结果都不一样，两种表都是聚合模型。 SELECT count(*) as cc FROM ( SELECT DISTINCT ac FROM xdr_source_log_login WHERE retm > '2024-05-01' and flag = 1 and sess <> 'logout' and scity <> '' and ac <> &#3...

2.0

0 votes

1 answers

132 views

billy 3

• asked May 20, 2024

【已解决】create view as select 里面包含 count(distinct xxx)执行失败，异常信息不明确，版本2.0.3

1.执行失败的语句，count时没问题，加上distinct执行异常，异常信息：execute error=errCode = 2, detailMessage = Unexpected exception: null CREATE VIEW index_products_cnt_hotel_yesterday_values ( data_day COMMENT 'data_day', resort COMMENT 'resort', inde...

2.0

0 votes

1 answers

120 views

YANGXR 7

• asked May 20, 2024

204版本，fe节点元数据同步问题，出现异常meta out of date

Doirs 2.0.4版本，3fe3be，其中一个FE运行一段时间出现 meta out of date. current time: 1716102704719, synchronized time: 1716102374701, has log: false, fe type: UNKNOWN fe.out中异常 此时发送到该节点的请求都会失败 该异常会自动恢复，但会在短时间内再次出现该问题 如fe.out中，fe的状态一直在转换，只有当重启该fe节点后短时间内才不会再出...

2.0

0 votes

1 answers

241 views

ZheWang 3

• asked May 20, 2024

Routineload 间歇性失败， be报错"Too many task" 后无响应（需重启be）

如题，kafka单组多消费者模式(hbase和doris同时消费), 5台物理机跑5be， 160core CCPU 600G内存, 启动了4个routineload 3个读取同一个topic并且可以稳定消费800万每秒 一到两小时， 另外一个routineload 压力较小可以忽略不计，在稳定消费1到2小时后有BE会报错"Too many tasks"， 然后该be无响应， 在稳定运行期间负载从未超过10%， 内存负载也很低， 除了routineload写表...

2.0

0 votes

1 answers

184 views

sdhzwc 8

• asked May 20, 2024

ETL工具Streamsets会适配吗

ETL工具Streamsets会适配吗

demand

0 votes

1 answers

88 views

郭明昊 21

• asked May 20, 2024

【已记录】使用flinkcdc同步pgsql到doris,pgsql表如果分区了,flinkcdc就读不到

root@mapuni-05:/home/flink-1.19.0# ./bin/flink run -Dexecution.checkpointing.interval=10s -Dparallelism.default=1 -c org.apache.doris.flink.tools.cdc.CdcTools ./lib/flink-doris-connector-1.19-1.6.0.jar postgres-sync-database --database yutu...

2.1 demand

0 votes

1 answers

139 views