检测 VM 关闭 Google Colaboratory
Detecting VM Shutdown Google Colaboratory
我正在使用 Google Colab 来训练模型,但我的模型和数据足够大,以至于我无法在 VM 关闭之前完成训练。我知道我可以间歇性地检查我的模型,但我正在寻找一种方法来检测 VM 何时将要关闭,这样我就可以保存我所有的检查点,而不是浪费我训练的任何时间。有没有一种方法可以检测 VM 何时关闭以便我可以执行此操作?
没有关闭信号,所以最好的办法是定期检查点到持久文件存储,例如 Drive。
我正在使用 Google Colab 来训练模型,但我的模型和数据足够大,以至于我无法在 VM 关闭之前完成训练。我知道我可以间歇性地检查我的模型,但我正在寻找一种方法来检测 VM 何时将要关闭,这样我就可以保存我所有的检查点,而不是浪费我训练的任何时间。有没有一种方法可以检测 VM 何时关闭以便我可以执行此操作?
没有关闭信号,所以最好的办法是定期检查点到持久文件存储,例如 Drive。