在 24GB 内存的机器上为 128GB 内存的作业进行内存交换

在 24GB 内存的机器上为 128GB 内存的作业进行内存交换

使用机器学习进行一些工作时,我需要为我的语言训练一个模型。由于他们只提供英语、德语和西班牙语,他们建议使用维基百科语料库并用它来训练模型。

问题是他们建议使用 128GB 内存。我要用来训练的机器只有 24GB 内存和不到 100GB 的可用磁盘空间。

我可以进行填满整个磁盘的交换吗?如果 75% 的内存在磁盘上,那么这项任务可能需要多花 100% 的时间,不是吗(他们已经说在一台好的机器上需要一天以上的时间)?

在主要具有交换内存的 24GB 机器上尝试是否合理,或者我应该从一开始就寻找具有正确要求的 AWS VM?

相关内容