在doris和spark 中执行iceberg的表操作的结果不一致

Viewed 7

doris 版本4.1.1
iceberg 版本1.9.2
spark 版本3.5.8
现在在iceberg 中有两张表,在表的data目录下都有5个文件,
image.png
在doris中执行rewrite_data_files操作,生成了2个文件,按理应该生成一个文件
image.png
在doris中执行expire_snapshots操作.hdfs上的过期快照的文件未被删除
image.png
image.png
在spark中执行rewrite_data_files操作,只生成一个文件
image.png
在spark中执行expire_snapshots操作,hdfs上的过期快照的文件将被删除
image.png
image.png

0 Answers