____ 3

• asked Apr 2

doirs表数据归档到对象存储的问题

doris2.1.x 5个BE节点 现有一张表，读时合并，配置存储为腾讯云的对象存储，cooldown_ttl 60秒，同时这张表也在不停的写入数据 表数据量大小200G，remoteCache设置是320G 发现在数据上传完到对象存储后，每个节点的磁盘remoteCache被用满了，现象看起来像是每个BE节点都缓存了这张表的全量数据，此时对象存储的数据监控一直有大量的读写请求，几天时间干到了2000多万次请求 想问的是这个remoteCache的占用是否正常？对象存储的读写...

2.1

0 votes

2 answers

61 views

zf 1

• asked Apr 2

doris fe节点变更成高可用配置

公司生产环境 doris 集群没有高可用 想改成高可用 需要怎么改 注意什么 需不需要改 配置文件 主义内存什么的 运维小白感谢大哥

cluster install community 2.0

0 votes

1 answers

61 views

erdong 11

• asked Apr 2

flink 多job checkpoint超时，doirs abort transation

集群中有20+个flink作业写doris，每个作业写1~20个doris表，全部关闭了2pc，在某个时间点发生了几个作业checkpoint超时 每个作业的checkpoint状态都不大，在超时前和重启后都正常耗时很短 checkpoint间隔基本都为一分钟，10分钟超时 观察BE的资源 cpu,memory,io都不是特别高 每次写入的数据也不是特别多 在BE日志中看到checkpoint超时时，很多abort transaction: TransactionState，...

2.1 ingestion

0 votes

1 answers

94 views

cai 3

• asked Apr 1

升级后视图查询速度变慢

有2张数据类似的表，为方便查询建了一个视图（union all）。一个计算同住的SQL，在原2.1的时候速度在1-2s。后来升级到4.0后查询需要6-10s。 为了测试结果准确，关闭了缓存。 -- 当前会话禁用查询结果缓存 SET enable_query_cache = false; -- 或者禁用 SQL 缓存 SET enable_sql_cache = false; 原视图查询：7.71s。 如果对单个表查询，查询速度在1.16s。2张表加起来也不超过3s。enabl...

4.0

0 votes

1 answers

83 views

cai 3

• asked Apr 1

日志一直在报parse date or datetime fail

是从2.1->3.0->3.1->4.04的升级路线走的。 看FE日志不停的报parse date or datetime fail,string:'0000-00-00 00:00:00' failed to initialize storage reader,tablet=10961。 已定位到sql： select * from __internal_schema.column_statistics where id='1094...

4.0

0 votes

5 answers

207 views

Yz1988 9

• asked Mar 31

doris-manager webserver启动问题

重启doris-manager webserver，后台进程起来了，但是8004端口一直没出来。页面也登录不上去。启动日志如下

manager

0 votes

1 answers

75 views

shenxiang 11

• asked Mar 30

使用StreamLoad向Doris-4.0.1版本的聚合表导数据超时问题

最近将Doris环境的版本从2.1.5升级到4.0.1，升级后验证功能是否都正常时发现使用streamload方式向一张聚合表批量导入数据时会超时ReadTimeOut， 表结构如下 CREATE TABLE instantaneous ( interval bigint NOT NULL, org_id varchar(32) NULL DEFAULT "", device_code varchar(64) NULL, point_name varchar(...

ingestion faq upgrade

0 votes

2 answers

137 views

pengpeng 1

• asked Mar 30

Doris从2.1.6迭代升级到3.1.2后故障问题

春节前有一天，FE的磁盘满了，没有及时清理，后续清理磁盘后，通过--metadata_failure_recovery命令，修复元数据并启动主节点后，重启从节点发现FOLLOWER无法接入主节点，一启动从节点就会导致主节点宕机，报出是BDB异常，查了说是3.x之后BDB保护机制导致的，避免BDB数据错乱； 后续问AI，尝试执行 ALTER SYSTEM DROP FOLLOWER "10.0.30.216:9010";删除FOLLOWER后 重新执行ALTER...

3.0 cluster upgrade

0 votes

1 answers

90 views

asx 1

• asked Mar 30

fe报错：write lock timeout

doris2.1.4版本，运行一段时间后就出现这个报错： failed to cancel query xxxx instance initiated=true done=false backend:79493,fragment id=Foo,reason:without status failed to try table 表名's write lock,timeout 10000 milliseconds,current owner:null org.apache...

2.1

0 votes

1 answers

59 views

seawenc 15

• asked Mar 30

doris4向hive库insert overwrite会卡住

doris版本:doris-4.0.2-rc02 hive版本：3.1.3 运行SQL： {code...}

4.0

0 votes

2 answers

92 views