liuzhe 5

• asked Sep 26, 2024

logstash doris output 按日志内容输出到不同的表

发现在 doris output 配置中使用日志内容渲染不出来，如下图配置，文件输出可以正确渲染到指定问题，但是输出到doris会提示无法写入 "%{@table}", 看现象是没有渲染。 麻烦大佬们看看是我使用不对还是目前不支持，有无其他实现的办法 报错日志: 标准输出日志： 日志内容： {"hostname":"-vm-33441","path":"/tmp/cmdb.log","re...

2.1

0 votes

1 answers

89 views

Alstore 29

• asked Sep 26, 2024

2.1.6 新建catalog 查表出现 No remote table found for table: xxxxx. Please refresh this catalog.

selectdb-doris-2.1.6 2.1.5升级2.1.6 后catalog 使用正常且配置 metadata_refresh_interval_sec 在2.1.6 新建catalog 后频繁出现 找不到表或者库 No remote table found for table: xxxxx. Please refresh this catalog. 或者修改正在使用的catalog后也会出现此现象 CATALOG 创建语句 {code...}

2.1 catalog

0 votes

2 answers

266 views

doris小白 11

• asked Sep 26, 2024

2.1.4版本插入数据报错Failed to connect to backend,Connection timed out

Caused by: java.sql.SQLException: errCode = 2, detailMessage = (10.128.24.16)[CANCELLED]Failed to connect to backend 11389: [E110]Fail to connect Socket{id=506806161407 addr=x.x.x.x:8060:45272} (0x0x7f6f52c21800): Connection timed out [Edit...

2.1

0 votes

3 answers

264 views

zzzz 11

• asked Sep 25, 2024

doris2.1.2版本，flink api和sql批量写入doris，3个批量参数不生效

需求：doris表有3个字段,id(int),age(int),name(string),采用主键模型,实现部分字段更新 下面以sql方式为例：api的也是一样情况 {code...} 3个参数设置后，依旧是任务执行，立马插入，日志没有明显的看出来有阻塞的情况。使用的是本地idea跑的，下面是日志打印： 2024-09-25 22:38:42,104 INFO org.apache.doris.flink.table.DorisDynamicTableSink - Send ...

2.1

0 votes

1 answers

209 views

zhangliang 1

• asked Sep 25, 2024

doris 2.1 执行一条删除语句后，后续所有查询报错

执行：delete from table_name where ip='ip' and info is null 其中info 字段是 variant 类型 再执行任何基于此表的查询都报错： failed to initialize storage reader. tablet=7439511, res=[E-1501][E-1501] Unexpected type when choosing predicate column ,type=35 0# dor...

2.1

0 votes

1 answers

61 views

记忆的重构 1

• asked Sep 25, 2024

升级到2.1.5后，偶然发生transactions有999个PREPARE的持续超过1个多小时还没结束，在线等

版本：2.1.5（从2.1.2升级过来的） 没有启用sys_log_verbose_modules，该配置行前面还是加了# 的默认状态 使用的语句大部分是向DUPLICATE模型表里使用INSERT OVERWRITE TABLE写入，如： INSERT OVERWRITE TABLE table1 PARTITION(p20240922) 少部分使用UNIQUE模型表是使用INSERT INTO写入，如： INSERT INTO table2 (...) SELECT .....

2.1

0 votes

1 answers

102 views

yckonnnnnn 11

• asked Sep 25, 2024

Doris表恢复

如图，我有两张一样的rds2 表被删除了，我只想恢复第一条，也就是tableid = 1063288的这张表，该如何恢复呢？之前都是按照表名进行恢复的，现在就是遇到了表名一样，只要恢复指定的表如何操作？

2.1

0 votes

1 answers

79 views

swiftlei 3

• asked Sep 25, 2024

请教: DORIS 2.1.6 如何在streamload中使用自定义函数(UDF)?

DORIS版本: 2.1.6 官方文档中说在 streamload 的列转换时支持使用udf，但在streamload中，使用udf会报Does not support non-builtin functions, or function does not exist的错误，具体运行条件如下： 1、http put streamload + basicauth方式，用户为root权限； 2、数据格式为 json (read_json_by_line = true 的模式) 3...

2.1

0 votes

1 answers

102 views

王艳忠 62

• asked Sep 25, 2024

2.1.6 INTO OUTFILE 多线程不生效

1、1fe 3be 环境 2、TPCH 生成的表 单副本 131M的数据 3、执行Sql语句 {code...} 6、fe 日志

2.1

0 votes

1 answers

84 views

leoleo 17

• asked Sep 25, 2024

2.1.6版本 doris 设置topn_opt_limit_threshold无效问题

尝试topn优化，设置topn_opt_limit_threshold的值，但是不管是设置0禁用还是大于默认1024的值都是会出现默认topn优化的情况，应该是设置的session没生效。 执行global和非gloabal都无效。 set global topn_opt_limit_threshold=10240; set topn_opt_limit_threshold=10240;

2.1

0 votes

1 answers

110 views