Doris 3.1 存算分离问题

Viewed 92
  1. 存算分离模式下,如果按天分区,最新7天为热数据,但所有冷数据都要保留,该如何处理。
    我记得分区数量不能无限增长甚至不能太多?
    image.png

  2. 存算分离模式下还需要开启load_to_single_tablet吗?

  3. 用户可以通过设置 BE 配置参数enable_file_cache_keep_base_compaction_output = true,强制让新数据进入文件缓存,从而提高命中率。
    这里的新数据如何理解,是最近新写入的数据,还是包含了用来base compaction的冷数据

  4. 有没有办法,使得我永远都是最近7天为热数据,冷数据查询后并不缓存?

  5. 物化视图的冷热又什么流程,该如何配置

1 Answers

1.基本上你按照天设置的话,没啥问题的。这里你注意调整动态分区保留的天数就可以了
2.不需要存算分离,没有副本的概念了
3.最近写入的数据
4.你把cache调整大一些,毕竟冷数据查询的不多,别把你的近7天的cache淘汰了就行
5.物化视图没有冷热的概念