一个hive大数据集群中即有paimon格式,又有orc格式的存储,如何使用一个catalog读取所有的表数据

Viewed 33

一个hive大数据集群中即有paimon格式,又有orc格式的存储,如何使用一个catalog读取所有的表数据

2 Answers

目前有遇到什么问题吗,是可以使用一个catalog读取所有的表数据,包括paimon和orc格式的

我的ods层是paimon流式写入的,dwb和dwd都是跑批任务存储格式为orc的格式,我在配置catalog的时候,现在type类型需要配置两种类型才行,一种是paimon,一种是hms才能访问,导致出现了两个catalog。我现在想只使用一个catalog既可以查询paimon有可以查询orc,请问该怎么实现呢?