Apache Doris 中文技术论坛
Questions Tags Users Badges

ROUTINE LOAD导入kafka数据,当kafka是cdc数据,JSON格式,带删除标识的:op:d

Asked Apr 15 Modified Jan 1, 0001
Viewed 23
2.1 content ingestion

导入到doris中,只会增加数据,无法识别当op:d时候,需要对数据做删除操作,这个可以实现根据op对数据进行操作吗

edited Jan 1, 0001
ASJW3217
asked Apr 15
1 Answers

routineload 无法实现这个操作,这种只能使用Doris中的 kafka catalog + streaming job + merge into的方式,但是这种方式还没release(CREATE STREAMING JOB)。

或者就是用flink 先做一次处理。

edited Jan 1, 1970
阿渊@SelectDB (没回帖直接加我主页微信)9915
answered Apr 15
Related Questions
doris2.1.11,be节点的数据目录下很多_tmp目录,把inode打满
doris 2.1.7 be 有时候会假死,进程还在fe那边是false
2 answers
fe 2.1.7 节点崩溃重启
1 answers
doris 使用minio备份
1 answers
doris 2.1.9 自动分区最佳实践中, "dynamic_partition.end" = "0"和文档介绍不一致
1 answers
已经是FE集群一员的FE1启动时用--helper指向一个集群外的FE4,FE1的元数据会被FE4影响么?
1 answers

Terms of service Privacy policy

Powered by Answer - the open-source software that powers Q&A communities.
Made with love © 2026 Apache Doris 中文技术论坛.