Deep learning 大型阵列的快速伪洗牌

Deep learning 大型阵列的快速伪洗牌,deep-learning,shuffle,Deep Learning,Shuffle,我有大量的样本要输入我的深度学习模型。洗牌数组需要很长时间。我不需要完全随机的洗牌,考虑到问题的性质,我不关心结果中的几个碰撞。那么,有没有一种伪洗牌算法既快又节省内存呢?算法被设计用来高效地从可能不适合内存的非常大的数据集中进行采样。TensorFlow提供了一个实现: 您目前如何洗牌?哪种语言/平台?我正在使用python,但只是寻找方法,我可以实现它。

我有大量的样本要输入我的深度学习模型。洗牌数组需要很长时间。我不需要完全随机的洗牌,考虑到问题的性质,我不关心结果中的几个碰撞。那么,有没有一种伪洗牌算法既快又节省内存呢?

算法被设计用来高效地从可能不适合内存的非常大的数据集中进行采样。TensorFlow提供了一个实现:


您目前如何洗牌?哪种语言/平台?我正在使用python,但只是寻找方法,我可以实现它。