鲁汀 23

• asked Nov 2, 2024

PyIceberg 无法读取 Doris 2.1.6 写入数据后的 Iceberg 表

执行 table.scan().to_arrow() 报错提示: {code...}

2.1 catalog

0 votes

2 answers

103 views

zlhxxx 170

• asked Nov 2, 2024

2.1.6 关于元数据

元数据一直上涨，镜像文件一直失败？？

2.1

0 votes

1 answers

59 views

baihongyu 1

• asked Nov 1, 2024

flink-doris-connector-1.17-1.5 cdctools同步mysql到doris DorisWriter异常关闭

flink版本：1.17.1 doris版本：2.0.12 flink-doris-connector版本：1.5 flink-cdc版本：2.4.2 启动方式：docker-compose 对flink-doris-connector源码做了二次开发，仅修改增加了同步多库的部分代码，即对源码中DatabaseSync.tableMapping做了扩充，以及sink时的表对应关系，其余核心功能未做改动，测试环境测试也正常，线上环境测试时，第一次测试出现ck异常，之后Doris...

2.0

0 votes

1 answers

167 views

蜂蜜烤鸡翅 17

• asked Nov 1, 2024

SKEW函数 有计划上2.1版本吗？

[https://doris.apache.org/zh-CN/docs/dev/sql-manual/sql-functions/aggregate-functions/skew/] 想咨询下，这几个函数有计划上2.1吗？

2.1

0 votes

1 answers

53 views

dingjn 7

• asked Nov 1, 2024

delete部分数据表所占空间没有释放

有一张表，一个副本，3T的数据，然后通过sql delete了部分数据后，show data from这张表，表的大小基本还是三个T，但是count(*) 的话只有两亿数据了，这两亿数据正常情况也就是占用几百g的空间。这是哪里的问题，多谢赐教

2.1

0 votes

1 answers

85 views

wywCn 7

• asked Nov 1, 2024

doris-manager24.1.1 启动webui失败

{code...} 直接访问地址显示如下：

manager

0 votes

1 answers

145 views

conor 43

• asked Nov 1, 2024

某银行深圳岗位新增两个大数据HC，有兴趣的大佬欢迎自荐推荐！[玫瑰]

大数据数仓开发岗： 1、本科及以上学历，3年以上数据开发经验，较好的业务理解和沟通能力，具备金融业务知识优先； 2、熟悉数据仓库建设过程，具备数据集市、数据主题、标签体系建设经验优先； 3、熟悉数据治理流程，具有数据热点、元数据管理、血缘分析经验优先； 4、熟练Hive、Spark、Flink等离线、流式计算框架的使用和调优，理解核心机制，有良好的SQL性能优化能力； 5、熟练掌握Java、python中的至少一种开发语言，较强编码能力，熟悉Python和Shell开发优先；...

catalog

1 votes

2 answers

266 views

阿帅 144

• asked Nov 1, 2024

调度任务每天都会执行失败好多次。

先把表列出来，然后说明情况。 {code...} 该表要接收各个业务线的数据， 然后用json_extract_xxx解析json将数据分发到各个业务的的原始明细表中。 该表一天10亿的数据导入（通过routine load）。 然后各个业务线会定时微批抽这个表的数据。 也就是说，这个表的读写负载是很大的。这是背景。 现在通过dolphinscheduler调度，每天都会有调度失败的任务（好多次）。如下： 有些甚至超时时间还不足1秒就报错了。 对应的时间点， 资源是充足的： ...

2.1

0 votes

1 answers

103 views

bo8888 3

• asked Nov 1, 2024

[BUG] SET <vault_name> AS DEFAULT STORAGE VAULT 不起作用

SET &lt;vault_name&gt; AS DEFAULT STORAGE VAULT SHOW STORAGE VAULTS\G; IsDefault: false

decoupled 3.0

0 votes

1 answers

61 views

WindowsHK 1

• asked Nov 1, 2024

字段值大小写敏感问题？

问题1：Doris如何设置字段值大小写不敏感？ 问题2：collation如何设置为utf8mb3_general_ci？（是要永久的） 若把变量设置utf8mb3_general_ci，也没效的。 问题3：若没法解决字段值大小写敏感问题，未来有ISSUE解决吗？ 以下是简单查看 show collation utf8mb4_0900_bin utf8mb4 309 Yes Yes 1 utf8mb3_general_ci utf8mb3 33 Yes Yes 1 SHOW ...

3.0 2.1

0 votes

3 answers

303 views