泽功 5

• asked Aug 7, 2024

2.1.3 Base compaction 执行时间

Base compaction 是只会在 20:00 到4:00执行么 磁盘日常使用时发现负载较高 看监控中的描述Base compaction 只会在20:00 到4:00 执行，但是看监控是一直在执行，这个合并导致集群在日常使用时较慢，这个合并的时间如何去控制,没有在文档中发现可配置时间项

2.1

0 votes

1 answers

73 views

changguowei 199

• asked Aug 7, 2024

count(distinct)超时问题

Doris版本2.1.5 BE服务器配置：16核32GB 我们使用了workload group机制，且开启了CPU和内存硬限制 workload group默认组(normal) memory_limit: 34% cpu_hard_limit: 20% workload group定时任务组(ad_group) memory_limit: 45% cpu_hard_limit: 65% 说明：定时任务使用的都是ad_group组下的资源查询；个人账号查询都用normal组...

2.1

0 votes

1 answers

94 views

sqffly 15

• asked Aug 7, 2024

json行转列问题

请问目前Doris能处理出这样的目标数据吗，sql应该怎么写 {code...}

2.1

0 votes

2 answers

98 views

baozixiaoge 1

• asked Aug 7, 2024

fe配置文件中参数audit_log_roll_num配置了10 没生效应如何排查

2.1

0 votes

2 answers

92 views

某某某某 54

• asked Aug 7, 2024

同步物化视图构建是否可以忽略历史数据

在存量数据比较多的情况下，构建同步物化视图， CREATE MATERIALIZED VIEW mv_test as SELECT **** FROM table WHERE 分区字段 > 当前时间。 这种构建方式依然会去处理历史数据，导致物化视图构建失败，能否支持跳过存量数据，构建完物化视图之后新增的数据才会刷新物化视图？

2.1

0 votes

1 answers

32 views

rainbow 1

• asked Aug 7, 2024

BE节点报fail to sub condition. condition=费用发生日期>='2020-07-01'

版本2.1.3 FE节点99、100、101 BE节点 88、89、99 报错节点 88; 前景描述：表约1000GB,分为900个tablet,[费用发生日期]为分区键,该列值有空值,在某次重启doris集群后，出现该问题，约10S一次，不间断输出日志。 /log/be.out未打印日志 /log/be.INFO日志如下 I20240807 10:15:42.880417 1920913 atorage_engine.cpp:1077) atart to delete un...

2.1

0 votes

1 answers

73 views

haoxk 11

• asked Aug 7, 2024

doris中的jsonpath支持情况

发现doris里的json函数里的json path，不支持过滤和数组范围，请问有计划支持吗

2.1

0 votes

2 answers

60 views

ademos 1

• asked Aug 7, 2024

从hdfs上恢复数据到Doris集群

-- 这是我们打的快照 BACKUP SNAPSHOT trace.tp_el_test_label TO idoris_repo ON (tp_el_test) PROPERTIES ("type" = "full"); -- 这是恢复数据的过程 RESTORE SNAPSHOT trace.tp_el_test_label FROM idoris_repo ON ( tp_el_test as tp_el_test_c) PROPERTIE...

2.0

0 votes

1 answers

28 views

阿渊@SelectDB 8150

• asked Aug 6, 2024

【 最佳实践】Doris StreamLoad

背景： Doris 的导入方式比较多，一般情况下每个场景都有对应的数据导入方式，比如Streamload、HdfsLoad（逐渐替换BrokerLoad）、RoutineLoad、MySqlLoad等。其中大家用的最多的可能是StreamLoad的方式，因为一般用doris flink connector 、doris spark connector、datax等进行数据同步时，底层都是走streamload。由于 spark doris connnector/flink d...

content ingestion faq

3 votes

2 answers

1164 views

wanxiaohun 41

• asked Aug 6, 2024

SQL 执行报错 ERROR 1105 (HY000): errCode = 2 sync filter size meet error

doris 2.1.5 表引擎为：UNIQUE KEY 表中有两个INVERTED索引 {code...} 这个是什么原因呢？需要怎么解决呢？

2.1

0 votes

1 answers

57 views