wangdi 29

• asked Jul 14, 2024

为什么扩展be节点无法增加导入速度？

1个FE，1个BE，导入速度18w（100MB），增加一个BE后，导入速度还是18w 扩展be后，已对表删除重建，BUCKETS由5增加为10 表设置如下： {code...} 请问可能是什么限制了写入速度？

2.1

0 votes

1 answers

113 views

wangdi 29

• asked Jul 14, 2024

请问Http Stream Load是否可以直接发送数据到BE

Stream Load客户端需要先向FE发送请求，FE将请求重定向到BE，再向BE传输数据。我发现重定向到BE的请求不均衡，有些BE被请求的几率明显小于其它BE，甚至有个BE没有收到过请求。客户端是否可以直接向BE发送数据，由客户端控制请求均衡。

2.1

0 votes

1 answers

45 views

____ 5

• asked Jul 13, 2024

集群容量规划：Doris数据冷热分层，表的配置为3副本，按照partition存至S3后，数据会写入S3三份还是只写入一份。

集群容量规划：Doris数据冷热分层，表的配置为3副本，按照partition存至S3后，数据会写入S3三份还是只写入一份。

2.1 2.0

0 votes

1 answers

64 views

bw-chuxin 33

• asked Jul 13, 2024

大量的insert语句触发doris事务处理bug

由于同事对doris数据导入机制不熟悉，使用大量的insert value语句进行数据导入，导入到一半时导入失败并终止，集群出现问题,无法正常工作，查询数据报错如下 {code...} 打包上线后，commited的事务瞬间变为了0,整个集群的读写也正常了，虽然问题解决了，但是没有找到触发这个问题根本原因，希望大神能给予解答，并且在后面版本发布的时候修复这个问题。

2.1

1 votes

1 answers

466 views

chuanzhang 1

• asked Jul 12, 2024

SQL查询报错

doris版本：doris-1.2.6-rc03 第一条sql： {code...} 执行第一个sql，没问题，查询结果为，但是执行第二个sql报错，报错信息：Unexpected exception: Predicate:d1 = '索菲亚' can't be assigned to some PlanNode. 第二个SQL就是在第一个SQL外面加了一层，麻烦看看是什么问题

1.2

0 votes

2 answers

68 views

FishMAN 13

• asked Jul 12, 2024

spark-doris-udf <bitmap_count> 问题

hive建表sql {code...} 排查源码： doris/fe/fe-common/src/main/java/org/apache/doris/common/io/Roaring64Map.java 目前只能追溯到这个ensureCumulatives方法出了问题 问题 想问的是我使用spark-sql生成bitmap的时候用spark的hash()函数，to_bitmap(hash(user_id))是否可以?生成bitmap是没有异常，就是读取的时候报错了。 我有...

2.0

0 votes

1 answers

69 views

FishMAN 13

• asked Jul 12, 2024

spark sql 导入bitmap问题

环境 doris版本：2.0.3 spark：3.1.1 spark-doris-conn：master分支 1 doris建表语句 {code...} 4 目前怀疑是自己的使用姿势有问题，但是都是按照官网来的 官网链接：https://doris.apache.org/zh-CN/docs/ecosystem/spark-doris-connector

2.0

0 votes

3 answers

87 views

xiyang.zdz 5

• asked Jul 12, 2024

doris2.1.3，_stream_load时报错

[INTERNAL_ERROR]cancelled: Encountered unqualified data, stop processing

2.1

0 votes

4 answers

216 views

zhuhezhen 7

• asked Jul 12, 2024

追问，原始csv文件数据入库后带双引号问题（附原帖）

场景： 每5分钟自动生成一个新的csv文件，新的数据持续往这个新的文件中写入 目前的写库方式： 原始csv文件中的字符串带双引号，数字不带，如&#34;abc&#34;,123,&#34;def&#34; 通过routine load写库到Doris中，表中的数据也是带双引号的 这个双引号如何去掉 文档提到trim_double_quotes和enclose 但是包围符报错，提示不可用 PROPERTIES ( &#34;desired_concurrent_number&#...

ingestion

0 votes

2 answers

115 views

changguowei 199

• asked Jul 12, 2024

SQL查询导致所有BE服务都宕机

Doris2.1.4版本 问题能稳定复现 只有用dbever查询外部表，查询条件中包含中文且中文中间有换行时才会复现该问题，SQL如下： SELECT brand,&#39;654301&#39;,mac from hive.data_analysis.publish where brand in (&#39;TCL&#39;) and city=&#39;阿勒泰 地区&#39;;

2.1

0 votes

1 answers

100 views