椰子Echo@SelectDB 1061

• asked Feb 17

【用户案例】浙江霖梓基于 Doris + Paimon 打造实时-离线一体化湖仓架构

浙江霖梓是一家专注于深度学习和人工智能应用的金融创新企业，自 2018 年成立以来，专注于深度学习和⼈⼯智能的应⽤ ，通过构建数据迭代能⼒形成结构化的数据决策产品，为企业提供精准经营决策。同时，提供基于大数据的风控能力的一系列高效便捷的金融服务产品。 然而，随着业务的持续扩展，大数据业务系统的局限逐渐暴露：报表系统计算缓慢、运维成本持续攀升、组件间的高度耦合导致架构稳定性较差等，严重影响了大数据系统产出效率，因此浙江霖梓引入 [Doris + Paimon 重新构建了实时/离...

catalog content

0 votes

1 answers

111 views

椰子Echo@SelectDB 1061

• asked Feb 17

【用户案例】从 ClickHouse 到 Apache Doris：在网易云音乐日增万亿日志数据场景下的落地

[网易云音乐 每天都会产生大量用户行为数据、业务数据及日志数据，这些数据在异常行为跟踪、客诉问题定位、运行状态监控、性能优化等方面扮演守护者的角色。面对每日万亿级别数据的增量，网易云音乐早期的日志库以 ClickHouse 为核心构建，但面临运维成本高、并发查询能力不足、写入性能不稳定、使用费用高昂等问题，在新需求的满足上稍显吃力。 为寻找更优质解决方案，结合当前的业务需求，网易云音乐引入 Apache Doris 作为日志库新方案，替换了 ClickHouse。目前已经稳定...

content

0 votes

1 answers

87 views

炳裔 45

• asked Feb 17

doris官网现在看不到编译doris的内容了么？

doris官网现在看不到编译doris的内容了么？

2.1 compilation docs

0 votes

1 answers

78 views

forest 35

• asked Feb 16

2.1.7，从postgres 数据同步到 doris主键模型表存在数据重复（源数据带时间戳）

doirs 版本2.1.7 从postgres 中同步数据，主键为id，create_time ，postgres中数据如下： ， 同步到doris 中数据如下（数据重复了）： doris 建表语句如下（省略部分无关字段）： 从初步测试来看使用if 判断两条数据的create_time 是否相当，结论是不相等，目前猜测虽然doris 显示时间一致，可能时间存储的包含了毫秒部分。烦请大佬关注。 补充下重现步骤 主键为id bigint ,create_time datetime...

2.1 ingestion

0 votes

1 answers

73 views

zhang 3

• asked Feb 14

如何创建rpm格式的安装包

最近我司搭建中科方德xc版本的测试环境，使用2.1.6版本doris通用的tar.gz的安装包，安装完成后操作系统不支持非授信的sh脚本执行，因此无法执行启动fe、be命令。 中科方德xc版本要求使用授信导入的rpm包安装软件，之后可以执行启动fe、be命令，我想把tar.gz的安装包转换成rpm包，请问是否可行，有什么官方工具或最佳实践吗？

2.1 install itai

0 votes

1 answers

40 views

Zhangxiaozhi755 1

• asked Feb 14

doris-streamloader数据写入时，BE挂掉一个，入库数据数据重复

doris2.1.6 用streamload进行doris数据入库，现在发现一个问题，3个BE，我们入库时kill掉一个BE，发现数据会重复 请问是什么情况呢？ 操作命令： {code...} 表是明细模型 用streamload导入时，有一个BE突然死掉了之后，数据会多。 个人猜测是不是没有label导致的，求大佬解释下原理 如果写label,doris-streamloader这种方式怎么设置呢? 官网只看到了curl方式streamload加label

2.1 ingestion

0 votes

2 answers

55 views

leon 3

• asked Feb 14

x2doris配置目标Doris时报错

x2doris配置目标Doris时报错内容如下： check datasource error, message: username/password error or NotFound active BE, please check 如果开启通过BE节点写入，可完成目标Doris配置，但是在执行同步时，仍会报错： x2Doris版本：1.05 Doris版本：doris-2.1.7-rc03 Spark版本：3.1.3 kudu版本：1.9.0

x2doris

0 votes

1 answers

25 views

dpnotnull 1

• asked Feb 14

【已解决】doris-2.1.8-rc01，创建OpenSearch Catalog后，无法访问数据

请教各位老师， 在2.1.8中创建到OpenSearch(2.5 / 2.9 / ES6.3 版本均试过，同样的报错）的Catalog {code...}

2.1

0 votes

1 answers

64 views

____ 23

• asked Feb 14

UDTF输出多列是否可行

public class StructTypeTestStringInt { public ArrayList evaluate(Integer val1, String val2) { if (val1 == null && val2 == null) { return null; } ArrayList res = new ArrayList<>(); res.add(val1); res.add(val2); return res; } } ...

3.0 query

0 votes

1 answers

37 views

cpt_doris 19

• asked Feb 14

存算分离下，怎么使用ssd

存算分离下，be哪些配置可以使用ssd 比方说： 1.compaction是把数据先拉到本地磁盘，在读进内存compaciton？还是直接从s3拉到内存，本地磁盘都不停留？ 如果有在本地磁盘停留，怎么使用ssd作为compaction的地方。 2. 数据的cache用了磁盘，配置file_cache_path 3. 还有哪些用到磁盘。 4. 存算分离下，store_root_path 是存什么数据

3.0

0 votes

1 answers

52 views