一共3个be节点,单台内存512G,mem_limit=40%,原来为hive表,数据量7亿,hdfs占用空间253G,全量执行直接报错如图 3,只占用其中一台机器的内存
图1
图2
图3
执行任务的时候,只占用其中一台的内存,doris manager内存监控如图
一共3个be节点,单台内存512G,mem_limit=40%,原来为hive表,数据量7亿,hdfs占用空间253G,全量执行直接报错如图 3,只占用其中一台机器的内存
图1
图2
图3
执行任务的时候,只占用其中一台的内存,doris manager内存监控如图
目前看是单be内存打满mem_limit导致;
下次高的时候be内存高的时候,可以参考这个看看哪些模块占用内存较大:https://doris.apache.org/zh-CN/docs/dev/admin-manual/memory-management/memory-tracker