2.1.6 关于数据删除

Viewed 47

image.png

(SUM(doris_be_disks_total_capacity{job="$cluster_name"}) by (instance, path) - SUM(doris_be_disks_avail_capacity{job="$cluster_name"}) by (instance, path)) / SUM(doris_be_disks_total_capacity{job="$cluster_name"}) by (instance, path)

明明我在九点40已经看了磁盘上的垃圾目录,没有垃圾数据,但九点50依然发生了大量数据删除,但doris_be_disks_local_used_capacity却没有变化,也就是data目录本身没变化。

image.png
而且总是有这样的规律,增长然后删除,反复。

image.png
与之对应的,分别是内存增长,下降,IO增长,下降。

请问这可能是什么问题,版本合并还是什么吗

1 Answers

时间较为规律的情况下,可能是集群中有定时清理数据相关的调度;
可以观察看看清理的期间主要是date哪些目录有变化。