doris版本:2.0.3
目前通过show backends显示其中一个be的数据占用只有879G
但在实际的数据目录中(排除日志、垃圾回收箱),占用空间达到了1.3T
这个状态持续了大半个月以上,尝试过重启机器释放文件句柄,但没有效果,目前怀疑可能是部分分片因为某些原因没有被正确清理,目前我该如何去定位这个问题?
doris版本:2.0.3
目前通过show backends显示其中一个be的数据占用只有879G
但在实际的数据目录中(排除日志、垃圾回收箱),占用空间达到了1.3T
这个状态持续了大半个月以上,尝试过重启机器释放文件句柄,但没有效果,目前怀疑可能是部分分片因为某些原因没有被正确清理,目前我该如何去定位这个问题?
1、排查看看是否有定时或频繁删数据和变更数据的操作
2、如果确定无用,可以通过ADMIN CLEAN TRASH清理 backend 内的回收站数据:https://doris.apache.org/zh-CN/docs/dev/sql-manual/sql-statements/Database-Administration-Statements/ADMIN-CLEAN-TRASH
https://github.com/apache/doris/pull/30904/files 2.0.5-rc02之后版本已经作了相关优化。
碰到类似问题: