Artificial intelligence HDF5输入数据集使用NVIDIA数字

Artificial intelligence HDF5输入数据集使用NVIDIA数字,artificial-intelligence,deep-learning,caffe,nvidia-digits,Artificial Intelligence,Deep Learning,Caffe,Nvidia Digits,我是使用NVIDIA数字的新手。我的列车数据集具有以下结构,其格式为.hdf5 我知道如何使用更简单的格式(如.txt或.jpg)来填充模型。我的问题是,如何为我的模型提供.hdf5格式的NVIDIA DIGITShdf5数据集仅用于数字图像分类数据集,即使这样,支持也不是很全面 为什么? Caffe对HDF5的支持不如对LMDB的支持: 对于大型数据集,必须将它们分解为单独的文件() 数据未预取-整个数据集立即读入内存() HDF5Data层()不支持数据转换 由于目前数字主要基于Caff

我是使用NVIDIA数字的新手。我的列车数据集具有以下结构,其格式为.hdf5


我知道如何使用更简单的格式(如.txt或.jpg)来填充模型。我的问题是,如何为我的模型提供.hdf5格式的NVIDIA DIGITS

hdf5数据集仅用于数字图像分类数据集,即使这样,支持也不是很全面

为什么?

Caffe对HDF5的支持不如对LMDB的支持:

  • 对于大型数据集,必须将它们分解为单独的文件()
  • 数据未预取-整个数据集立即读入内存()
  • HDF5Data层()不支持数据转换
由于目前数字主要基于Caffe,我们的主要数据集格式是LMDB。如果/当我们支持更多后端框架时,我们可能会决定标准化更通用的格式,如HDF5或ZipFile

crops       Dataset {27482, 3, 128, 192}
labels      Dataset {27482, 12}
mean        Dataset {3, 128, 192}
pids        Dataset {27482}