Python 3.x 在RAM中加载TFR记录文件_Python 3.x_Tensorflow_Dataset_Deep Learning_Tfrecord

Python 3.x 在RAM中加载TFR记录文件

python-3.x tensorflow deep-learning

Python 3.x 在RAM中加载TFR记录文件,python-3.x,tensorflow,dataset,deep-learning,tfrecord,Python 3.x,Tensorflow,Dataset,Deep Learning,Tfrecord,我有一个大约50G的数据集，我想把它转换成tfrecord。tfrecord文件也将至少为50G。所以，当我想读取这个文件时，如何将它加载到RAM中？（ram您是否尝试过使用自定义哈希表以便可以按您想要的方式分配数据集？老实说，我正在尝试将IMDB数据集的一部分转换为大约50G的tfrecord格式。我使用pascalvoc_to_tfrecords.py。链接如下：您是否尝试过使用自定义哈希表以便可以按您想要的方式分配数据集？老实说，我正在尝试将IMDB数据集的一部分转换为tfrecord格式

我有一个大约50G的数据集，我想把它转换成tfrecord。tfrecord文件也将至少为50G。所以，当我想读取这个文件时，如何将它加载到RAM中？（ram您是否尝试过使用自定义哈希表以便可以按您想要的方式分配数据集？老实说，我正在尝试将IMDB数据集的一部分转换为大约50G的tfrecord格式。我使用pascalvoc_to_tfrecords.py。链接如下：您是否尝试过使用自定义哈希表以便可以按您想要的方式分配数据集？老实说，我正在尝试将IMDB数据集的一部分转换为tfrecord格式，格式约为50G。我使用pascalvoc_to_tfrecords.py。链接如下：