echo 3

• asked Aug 9, 2024

hive的catalog查询表数据为空

集群架构四台节点，版本：1.2.6，分别是1fe，3be，1observer，1observer和一台be混布，然后最近一直出现通过master的fe读取catalog的表有时候读不出来数据，读取表数据为空，但是通过Observer是可以读取出来表数据的，我看了fe和observer的fe.conf配置是一样的，都配置了增量的元数据同步，参数如下： enable_hms_events_incremental_sync = true hms_events_polling_int...

catalog 1.2

0 votes

2 answers

152 views

yugunsung 117

• asked Aug 9, 2024

master fe内存突然飙升，怎么排查？

版本：2.0.12 如下图：8月2号之前，3个fe的内存很平稳，8月2号开始master fe内存突然升高，这是正常的吗？还是存在内存泄露？

2.0

0 votes

1 answers

220 views

caishen 5

• asked Aug 9, 2024

doris2.1.4 非分区表自动分桶的规则

doris 2.1.4 版本 建表语句 CREATE TABLE test ( id BIGINT NULL COMMENT 'id', name INT NULL COMMENT '名称', ) ENGINE=OLAP UNIQUE KEY(id) COMMENT '测试表' DISTRIBUTED BY HASH(id) BUCKETS AUTO PROPERTIES ( "replication_allocatio...

2.1

0 votes

1 answers

140 views

____ 23

• asked Aug 9, 2024

新增数据湖构建，写回hudi、paimon功能

目前已经支持写会hive了，但很多场景都是用hudi、paimon构建的数据湖，经常计算后需要回写，目前都是用flink实现的，能否用doris直接进行其内部计算引擎实现，计算完直接写回paimon、hudi

demand

1 votes

1 answers

139 views

____ 5

• asked Aug 9, 2024

2.0版本doris使用spark写入，并行度参数不生效 #39130

设置的参数为： .option("doris.sink.task.use.repartition", "true") .option("doris.sink.task.partition.size", "1") 但doris的合并压力太大，还是产生了太多次streamload请求，收到报错。 detailMessage = current running txns on db 11341 is 1000, lar...

2.0

0 votes

1 answers

108 views

____ 3

• asked Aug 9, 2024

Doris 混用SSD HDD 当SSD满时是否会自动使用HDD

正在使用Doris 2.1.4，配有一块SSD，两块HDD，已经能在doris中正确识别磁盘类型。 现在遇到的问题是，新建表时如果不指定storage_medium那么之后show create table现实自动被设置了storage_medium: hdd。随后重新建表显式制定了storage_medium='ssd'后发现insert能正确插入ssd中。 然而看了doris官网文档却并没有找到明确指出，此时如果ssd写满，是否会继续使用HHD进行写入，还...

2.1

0 votes

1 answers

208 views

____ 33

• asked Aug 9, 2024

doris 审计日志系统内部表存在slow sql

使用的doris版本是 2.1.5 发现有不少的慢sql，应该是来自系统内部。并有大量warning。 {code...} 这种slow sql,是否需要处理？是怎么发生的？

2.1

0 votes

1 answers

182 views

zhangxiaolong861 9

• asked Aug 9, 2024

doris从2.0.4升级到doris2.1.4后,doris_fe_tablet_max_compaction_score指标飙升

doris从2.0.4升级到doris2.1.4后,doris_fe_tablet_max_compaction_score立刻从5,6的值飙升到99,然后经过12个小时后，现在都达到了1100了。观察集群的服务，写入和查询都是正常的，很奇怪，以前这个指标高是异常的，现在这个指标高是正常？指标的含义变了？

2.1

0 votes

1 answers

80 views

zhangxiaolong861 9

• asked Aug 9, 2024

doris_fe_tablet_max_compaction_score 指标飙升,降低不下来

doris从2.0.4升级到doris2.1.4后,doris_fe_tablet_max_compaction_score立刻从5,6的值飙升到99,然后经过12个小时后，现在都达到了1100了。观察集群的服务，写入和查询都是正常的，很奇怪，以前这个指标高是异常的，现在这个指标高是正常？指标的含义变了？

2.1

0 votes

1 answers

72 views

鲁汀 25

• asked Aug 9, 2024

pymysql Duplicate 表执行 DELETE 语句返回影响记录数始终为零

doris: 2.1.5 pymysql 1.4.6 pymysql 连接 Doris, Duplicate 表 DELETE 语句成功删除记录, 返回记录为零 Unique 表 DELETE 语句则会返回正确的记录数 INSERT, UPDATE, SELECT 没有这个问题

2.1 query

0 votes

1 answers

59 views