Qmain 在 请教各位大佬,关于linux核心与内存调度的问题 中发帖
请教各位大佬,关于linux核心与内存调度的问题:
我目前有一个100万细胞的单细胞分析,运行降采样sketchdata这一步的时候非常慢,需要一周以上的时间,我想优化这一步改为多核运行提高速度,但是怕内存不足报错,所以想请教大佬关于多核运行程序和内存使用的关系,以及怎么才能得到最优解
我问AI优化方案他就让我多核运行,我继续问是否存在内存的问题他就让我单核跑 🥲这个能有最优方案吗
[1] “数据对象大小: 50.81 GB”
[1] “任务类型: sketch | 细胞数: 942832 | 核心数: 1 | 每进程内存: 243.2 GB”