【已解决】2.1.4版本对于数据湖忽略缓存中不存在的文件是否会导致数据缺失

Viewed 69
2.1 lakehouse

rt，忽略后，读取的只是部分文件数据，对于最终结果是否会有数据缺失的风险

1 Answers

这个对用户最终的感知是一样的。本质原因是开启了缓存，而缓存本身就具有时效性。
如果要保证数据完全一致，需要关闭缓存。

morningman457
Related Questions
fe节点加入集群时报错
大佬们求助，授予角色可以创建catalog的权限报错
1 answers
关于catalog_paimon环境下如何启用paimonNativeReadSplits?
不同doris集群如何同步数据？
1 answers
bitmap类型设置默认值后，数据导入报错can not cast from origin type bitmap to target type=varchar(65533)
1 answers
doris2.1.8，相同的sql，不同账期但数据量差异，大小表join，有时候会自动join reorder导致OOM
1 answers