doris 通过catalog 同步hive数据报错

Question

Invalid magic number in parquet file, bytes read: 0, file size: 3863946, path: read magic: 8V
版本是2.1.7 有那个大神遇到过啊。在生产环境发生，痛苦

徐振超@SelectDB(可以直接加微信Faith_xzc) · Answer

试一下关闭file cache后，使用tvf读取这个文件 hdfs://nameservice1/user/hive/warehouse/dmr.db/dmr_rpt_sal_sales_inv_all_material/part_dt=2024-11-18/000000_0，看看能不能成功读出来

使用 SET enable_file_cache = false; 禁用file cache