DMTCP分布式多线程检查点工具

高性能计算/分布式计算等大量计算需要程序运行几天、几周甚至几个月，如果期间因为电力或者不可避免的问题导致程序中断会浪费大量的时间和人力，还 有超级计算机在这段时间里运行的电力成本。我们没有遇到过电力问题，不过我们最近遇到的场景是实验室需要做强制安全检查，要求关闭所有电脑，所以我们需要 一种工具能设置断点暂停程序、把状态保存到硬盘、再按照要求恢复，就像程序员用 IDE 调试程序一样，设置断点、单步跟踪（或恢复运行）。

在多主机、多线程的复杂分布式计算环境，给程序设置断点不是一件容易的事情，因为程序的某部分可能在其他主机上运行。DMTCP: Distributed MultiThreaded CheckPointing 是一个非常不错的工具，不需要修改 Linux 内核，不依赖内核和内核模块。