Warning: file_get_contents(/data/phpspider/zhask/data//catemap/6/ant/2.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
如何在使用Keras进行培训时识别文件夹中损坏的图像文件_Keras - Fatal编程技术网

如何在使用Keras进行培训时识别文件夹中损坏的图像文件

如何在使用Keras进行培训时识别文件夹中损坏的图像文件,keras,Keras,我正在使用Keras ImageDataGenerator和来自目录的flow_ 对于培训数据,每个类文件夹都有10000-20000个jpg文件,其中包含13个类。在训练期间,每小时左右,在完整数据训练一次之前,我从Keras那里得到一个错误,表明某个特定的jpg文件无法读取。果然,我仔细查看了文件的位置,发现文件已损坏。 问题是这浪费了很多时间,每次出现错误,我都必须重新开始训练 有没有办法从目录中修改Keras flow_,或者确保跳过损坏的文件,并且无误地继续培训 如果1不可能,在开始培

我正在使用Keras ImageDataGenerator和来自目录的flow_

对于培训数据,每个类文件夹都有10000-20000个jpg文件,其中包含13个类。在训练期间,每小时左右,在完整数据训练一次之前,我从Keras那里得到一个错误,表明某个特定的jpg文件无法读取。果然,我仔细查看了文件的位置,发现文件已损坏。 问题是这浪费了很多时间,每次出现错误,我都必须重新开始训练

  • 有没有办法从目录中修改Keras flow_,或者确保跳过损坏的文件,并且无误地继续培训
  • 如果1不可能,在开始培训之前,是否有方法快速(我有1.1 TB的数据)验证所有类文件夹中的corrput文件,并将其从这些文件夹中删除
  • 可能的重复可能的重复