yugunsung 117

• asked Jan 14, 2025

关于doris分桶的几个问题

版本：2.0.12 1、这里的数据量指的是压缩前还是压缩后？ 2、如果查看分桶大小，是不是通过show partitions from xxx，然后计算DataSize/（Buckets * ReplicationNum）得出？ 3、是不是分桶数越多，查询越快？

2.0

0 votes

1 answers

120 views

1

• asked Jan 14, 2025

Doris是否支持使用SQL自定义表值函数

如题，如果使用UDTF则不知道在UDTF代码中如何进行sql查询。Doris是不是还未考虑这块的开发计划。

3.0 demand functions

0 votes

2 answers

121 views

happyday_zhang 9

• asked Jan 14, 2025

2.1.7，workload group硬限生效，但是还是会超过设定的cpu_hard_limit?

doris版本为2.1.7，都是按照官网设置的步骤，一个be节点下设置3个workload group，同时目前normal组也已经将cpu_hard_limit修改为10%，但是设置的3个workload group节点加起来cpu还是会超过设定值的总和？ 具体运行代码如下： {code...}

resource-admin 2.1

0 votes

4 answers

240 views

fengjie 5

• asked Jan 14, 2025

doris会支持es 的mulit_match这种功能吗

表结构 CREATE TABLE dwd_mz_companyinformation_base ( id bigint NULL COMMENT 'id', name varchar(255) NULL COMMENT '公司名称', type varchar(255) NULL COMMENT '公司类型1、有限责任公司;2、股份有限公司;3、合伙企业;4、个人独资企业;5、农民专业合作社', address varchar(...

2.1 query demand

0 votes

3 answers

97 views

xiaofan2015 5

• asked Jan 14, 2025

doris 2.1.5，查询hudi报错IO_ERROR]Out-of-bounds Access

SELECT count(*) counts FROM hive.test.tableA WHERE charge_date >'2025-01-09 11:42:09' and charge_date < '2025-01-14 10:42:09' 1105 - errCode = 2, detailMessage = (10.0.1.126)[CANCELLED]cur path: hdfs://nameservice1/app...

2.1 query

0 votes

2 answers

80 views

kyle.zhang 1

• asked Jan 14, 2025

2.1.7 版本同时执行coalesce和STDDEV_POP出现类型错误

建表语句： {code...} 出现错误： errCode = 2, detailMessage = (doris-be-cn-0.doris-be-cn.dataplatform.svc.cluster.local)[INTERNAL_ERROR]output type not match expr type , col name , expected type Float64 , real type Nullable(Float64)

2.1

0 votes

1 answers

69 views

linzi 3

• asked Jan 14, 2025

2.1.7，分区数据冷备到hdfs，部分tablet冷备有问题，cannot read cooldown meta: [INTERNAL_ERROR]malformed tablet meta

doris 2.1.7 部分tablet的副本数据显示还是在local be日志报错 I20250114 10:04:04.791726 107780 tablet.cpp:2451] cannot read cooldown meta: [INTERNAL_ERROR]malformed tablet meta , path=/data/24763/24765.0.meta {code...} /../../../include/c++/11/bits/unique_ptr...

resource-admin 2.1

0 votes

1 answers

42 views

maomaoxiaoxiao 1

• asked Jan 14, 2025

求助：doris2.1写入速度无法提高

我在使用doris-flink-connector写doris双节点集群，写入速度一直在约40w/s左右无法提高了，be节点的cpu（48核）只有25%，磁盘和网络都有很大的富余，请问有什么地方提议进一步优化呢？或者我的配置哪里需要修改呢？谢谢 我的be节点配置： push_worker_count_high_priority = 24 push_worker_count_normal_priority = 24 streaming_load_json_max_mb = 10...

2.1 ingestion performance

0 votes

2 answers

159 views

gongjiayun 3

• asked Jan 14, 2025

Flink Doris Connector数据同步，UNIQUE KEY(id, accounting_period) 模型，数据同步后出现相同的id

flink版本1.20.0，doris版本3.0.3 /etc/docker/flink-1.20.0/bin/flink run -Dexecution.checkpointing.interval=10s -Dparallelism.default=1 -c org.apache.doris.flink.tools.cdc.CdcTools /etc/docker/flink-1.20.0/lib/flink-doris-connector-1.20-24.1.0.jar...

3.0 ingestion

0 votes

3 answers

65 views

yugunsung 117

• asked Jan 14, 2025

parallel_fragment_exec_instance_num和parallel_pipeline_task_num这两个配置的区别？

版本：2.0.12 parallel_fragment_exec_instance_num的默认值为1，parallel_pipeline_task_num默认值为0。 这两个配置项有什么区别？设置成多少比较合适？

2.0

0 votes

1 answers

78 views