鲁汀 23

• asked Nov 2, 2024

Doris 2.1.6 无法删除存储在 MinIO 上的 Iceberg 表数据文件

使用 DROP TABLE 后仅删除了Catalog里对应的表数据, 存储在 MinIO 上的 Iceberg表数据文件和 Iceberg 表元数据都没有删除.

2.1 catalog

0 votes

1 answers

84 views

鲁汀 23

• asked Nov 2, 2024

PyIceberg 无法读取 Doris 2.1.6 写入数据后的 Iceberg 表

执行 table.scan().to_arrow() 报错提示: {code...}

2.1 catalog

0 votes

2 answers

93 views

zlhxxx 158

• asked Nov 2, 2024

2.1.6 关于元数据

元数据一直上涨，镜像文件一直失败？？

2.1

0 votes

1 answers

56 views

baihongyu 1

• asked Nov 1, 2024

flink-doris-connector-1.17-1.5 cdctools同步mysql到doris DorisWriter异常关闭

flink版本：1.17.1 doris版本：2.0.12 flink-doris-connector版本：1.5 flink-cdc版本：2.4.2 启动方式：docker-compose 对flink-doris-connector源码做了二次开发，仅修改增加了同步多库的部分代码，即对源码中DatabaseSync.tableMapping做了扩充，以及sink时的表对应关系，其余核心功能未做改动，测试环境测试也正常，线上环境测试时，第一次测试出现ck异常，之后Doris...

2.0

0 votes

1 answers

142 views

蜂蜜烤鸡翅 17

• asked Nov 1, 2024

SKEW函数 有计划上2.1版本吗？

[https://doris.apache.org/zh-CN/docs/dev/sql-manual/sql-functions/aggregate-functions/skew/] 想咨询下，这几个函数有计划上2.1吗？

2.1

0 votes

1 answers

45 views

dingjn 7

• asked Nov 1, 2024

delete部分数据表所占空间没有释放

有一张表，一个副本，3T的数据，然后通过sql delete了部分数据后，show data from这张表，表的大小基本还是三个T，但是count(*) 的话只有两亿数据了，这两亿数据正常情况也就是占用几百g的空间。这是哪里的问题，多谢赐教

2.1

0 votes

1 answers

74 views

wywCn 7

• asked Nov 1, 2024

doris-manager24.1.1 启动webui失败

{code...} 直接访问地址显示如下：

manager

0 votes

1 answers

134 views

conor 43

• asked Nov 1, 2024

某银行深圳岗位新增两个大数据HC，有兴趣的大佬欢迎自荐推荐！[玫瑰]

大数据数仓开发岗： 1、本科及以上学历，3年以上数据开发经验，较好的业务理解和沟通能力，具备金融业务知识优先； 2、熟悉数据仓库建设过程，具备数据集市、数据主题、标签体系建设经验优先； 3、熟悉数据治理流程，具有数据热点、元数据管理、血缘分析经验优先； 4、熟练Hive、Spark、Flink等离线、流式计算框架的使用和调优，理解核心机制，有良好的SQL性能优化能力； 5、熟练掌握Java、python中的至少一种开发语言，较强编码能力，熟悉Python和Shell开发优先；...

catalog

1 votes

2 answers

245 views

阿帅 144

• asked Nov 1, 2024

调度任务每天都会执行失败好多次。

先把表列出来，然后说明情况。 {code...} 该表要接收各个业务线的数据， 然后用json_extract_xxx解析json将数据分发到各个业务的的原始明细表中。 该表一天10亿的数据导入（通过routine load）。 然后各个业务线会定时微批抽这个表的数据。 也就是说，这个表的读写负载是很大的。这是背景。 现在通过dolphinscheduler调度，每天都会有调度失败的任务（好多次）。如下： 有些甚至超时时间还不足1秒就报错了。 对应的时间点， 资源是充足的： ...

2.1

0 votes

1 answers

90 views

bo8888 3

• asked Nov 1, 2024

[BUG] SET <vault_name> AS DEFAULT STORAGE VAULT 不起作用

SET &lt;vault_name&gt; AS DEFAULT STORAGE VAULT SHOW STORAGE VAULTS\G; IsDefault: false

decoupled 3.0

0 votes

1 answers

49 views