zlhxxx 176

• asked Mar 7

Doris 4.0.3 读取S3 如何确定schema

使用内置的s3 读取方式如下： INSERT INTO table (xx) SELECT XX as xx FROM S3( "uri" = "s3://s3mongoproduct//.parquet", "format" = "parquet", "s3.endpoint" = "s3.eu-central-1.amazonaws.com", "s3.region&#...

4.0

0 votes

1 answers

36 views

mortal 13

• asked Mar 6

Doris 2.1.10->3.0.0->3.0.8->3.1.3 用Ranger 进行管控权限后不能创建用户

一、avx2版本升级 1.1 、Doris_Prd集群升级记录 2.1.10 -> 3.0.0 -> 3.0.8_ 3.1.3 ranger-doris-security.xml配置项 问题:不能创建用户 1.2、Doris_Prod_Version_Test 3.1.3版本直接升级 升级记录 权限控制示例 取消权限测试 二、noavx2版本也是一样的情况、不能创建用户 2.1.10->3.0.0->3.0.8->3.1.3 2.1.10-&gt...

3.1

0 votes

0 answers

66 views

lubai 3

• asked Mar 6

doris主键表可以bucket配置太小，怎么修改？

CREATE TABLE dwd_table ( user_id bigint(20) , id bigint(20) , spm text ) ENGINE=OLAP UNIQUE KEY(user_id, id) COMMENT '用户埋点' DISTRIBUTED BY HASH(user_id) BUCKETS AUTO PROPERTIES ( "replication_allocation" = "tag.location....

2.1 2.0

0 votes

1 answers

45 views

AnfaZhang 3

• asked Mar 4

存算分离FE JVM问题咨询

如上, 集群有3个FE节点, 其中Master FE的JVM远大于非Master的FE, 而且看着每次image checkpoint之后, 内存都会再涨很多不下来, 目前总共约70万个Tablet, Master FE内存已经20GB+了, 是Master FE逻辑中有内存泄漏 ? 补充背景: 之前用3.1.2版本就出现过非常严重的FE内存泄漏问题,具体是stream load的session id会在FE中一直存储, 随着导入次数的增加FE内存就越来越大直到OOM, 后续...

decoupled

0 votes

1 answers

69 views

AC130 1

• asked Mar 3

Stream Load时Http Connection aborted

使用python的requests包进行Stream load导入数据时，经常出现requests.exceptions.RequestException异常，错误内容是'Connection aborted.', ConnectionResetError(10054, '远程主机强迫关闭了一个现有的连接。', None, 10054, None)，抓包发现，服务端发送了大量的RST报文，这是什么原因

3.0

0 votes

1 answers

62 views

lilili 5

• asked Mar 3

数据库备份恢复

容灾管理的普通备份与恢复，不是CCR，通过minio服务操作，支持将备份的数据进行压缩吗？以减少磁盘空间的的占用。

3.0

0 votes

1 answers

82 views

hooray 1

• asked Mar 3

doris 4.0.1 存算分离数据回收求教

当前doris统计数据量为31.865T，使用的是show proc '/dbs' \G;统计 当前使用腾讯云COS做存储，使用了两个桶，一个桶容量为253.53T，一个桶容量为238.19T 数据爆炸的太严重了，如何能快速回收数据释放容量

decoupled storage cluster

0 votes

1 answers

59 views

____ 11

• asked Mar 2

Doris4.0开启Workload Group 绑定 Resource Group后，分区表属性修改无效

Doris4.0 ，已经创建的分区表，修改已有分区本分布到 新的资源组上面会失败。 例如：审计日志这个表，默认是default，现在上了资源组，没有default了，导致审计日志都不更新了 使用ALTER命令修改不生效 ALTER TABLE __internal_schema.audit_log MODIFY PARTITION (*) SET ( "replication_allocation" = "tag.location.group_a:3&...

4.0

0 votes

1 answers

65 views

fushouhai 1

• asked Mar 2

多张表使用colocate join，如何设计？

在doris中，有表a, b, c, a.id = b.a_id; b.id = c.b_id , 启用 colocate join, 期望所有关联相同a.id的数据落在同一个物理节点上，如何设计这三张表

2.1

0 votes

1 answers

52 views

SUYONGFAN 1

• asked Mar 2

2.1.7 版本routine load 写入问题

2.1.7版本的routine load 使用一段时间后，lag延迟会很高，得重启fe和be才能解决写入延迟高的问题，有哪位大佬知道这个是什么原因导致的或者怎么排查吗？

2.1

0 votes

1 answers

48 views