Python AWS sagemaker中的内存泄漏tensorflow培训未显示在objgraph.show_growth()中

Python AWS sagemaker中的内存泄漏tensorflow培训未显示在objgraph.show_growth()中,python,tensorflow,amazon-sagemaker,Python,Tensorflow,Amazon Sagemaker,我有一个非常恼人的内存利用率(不是GPU内存)的稳步增加,这导致训练过程在几个小时后崩溃。我试过像objgraph这样的工具和类似的工具,但它并没有显示分配对象数量的任何增加。 我可以使用什么工具来确定泄漏原因

我有一个非常恼人的内存利用率(不是GPU内存)的稳步增加,这导致训练过程在几个小时后崩溃。我试过像objgraph这样的工具和类似的工具,但它并没有显示分配对象数量的任何增加。 我可以使用什么工具来确定泄漏原因