FishMAN 13

• asked Jul 12, 2024

spark-doris-udf <bitmap_count> 问题

hive建表sql {code...} 排查源码： doris/fe/fe-common/src/main/java/org/apache/doris/common/io/Roaring64Map.java 目前只能追溯到这个ensureCumulatives方法出了问题 问题 想问的是我使用spark-sql生成bitmap的时候用spark的hash()函数，to_bitmap(hash(user_id))是否可以?生成bitmap是没有异常，就是读取的时候报错了。 我有...

2.0

0 votes

1 answers

66 views

FishMAN 13

• asked Jul 12, 2024

spark sql 导入bitmap问题

环境 doris版本：2.0.3 spark：3.1.1 spark-doris-conn：master分支 1 doris建表语句 {code...} 4 目前怀疑是自己的使用姿势有问题，但是都是按照官网来的 官网链接：https://doris.apache.org/zh-CN/docs/ecosystem/spark-doris-connector

2.0

0 votes

3 answers

87 views

xiyang.zdz 5

• asked Jul 12, 2024

doris2.1.3，_stream_load时报错

[INTERNAL_ERROR]cancelled: Encountered unqualified data, stop processing

2.1

0 votes

4 answers

216 views

zhuhezhen 7

• asked Jul 12, 2024

追问，原始csv文件数据入库后带双引号问题（附原帖）

场景： 每5分钟自动生成一个新的csv文件，新的数据持续往这个新的文件中写入 目前的写库方式： 原始csv文件中的字符串带双引号，数字不带，如&#34;abc&#34;,123,&#34;def&#34; 通过routine load写库到Doris中，表中的数据也是带双引号的 这个双引号如何去掉 文档提到trim_double_quotes和enclose 但是包围符报错，提示不可用 PROPERTIES ( &#34;desired_concurrent_number&#...

ingestion

0 votes

2 answers

113 views

changguowei 199

• asked Jul 12, 2024

SQL查询导致所有BE服务都宕机

Doris2.1.4版本 问题能稳定复现 只有用dbever查询外部表，查询条件中包含中文且中文中间有换行时才会复现该问题，SQL如下： SELECT brand,&#39;654301&#39;,mac from hive.data_analysis.publish where brand in (&#39;TCL&#39;) and city=&#39;阿勒泰 地区&#39;;

2.1

0 votes

1 answers

100 views

agile 21

• asked Jul 12, 2024

X2Doris任务

Doris2Doris任务为何总是失败？ 还有任务失败后，重新启动，可以断点续传么？

2.1

0 votes

1 answers

100 views

yalamountain 24

• asked Jul 12, 2024

money_format 负数的时候会有异常

SELECT money_format(-23243.344) 结果是 -23,243.-,

2.1

0 votes

2 answers

42 views

zhangjj 77

• asked Jul 12, 2024

使用spark connector导入数据，无法导入，应该是数据问题，但是返回信息中没有error_url，所以无法排查是哪些数据有问题。这种情况我该如何排查问题

版本2.1.1 怎样才能在strea_load的返回信息中返回error_url？ 错误日志： {code...}

2.1 ingestion

0 votes

1 answers

79 views

郭明昊 11

• asked Jul 12, 2024

flinkcdc pgsqlcdc到doris报错

doris 2.1.4 flink 1.19.1 sql-client提交

2.1

0 votes

1 answers

38 views

李金石033 3

• asked Jul 12, 2024

2.0.11 oracle数据源导入doris问题：数据类型为BLOB导入有误

oracle中该字段BLOB数据类型存储的是图片的二进制，在doris对应的类型是STRING,oracle该字段存储的最大字节大小10mb左右，doris设置了string_type_length_soft_limit_bytes=11000000 1.使用flink-doris-connector-1.6.1，导入后的值为空， 2.使用dataxwriter导入doris，显示的是一串数字，不正确 3.使用dataxwriter写入本地文件看格式是否正确，显示的一堆看不到...

2.0

0 votes

3 answers

124 views