Python 如何将sprase数字自定义数据集加载到PyTorch中?

Python 如何将sprase数字自定义数据集加载到PyTorch中?,python,scipy,deep-learning,pytorch,Python,Scipy,Deep Learning,Pytorch,我有一个定制的数字数据集,有100k个数据点和50M个稀疏特征。将此数据集加载到PyTorch中的最佳方式是什么 我正在寻找一些加载稀疏矩阵的函数,例如加载到稀疏张量中。您使用torch.sparse做了哪些尝试?它描述了COO输入。它与sparse.coo_矩阵不同,但足够接近。您是如何构建csc矩阵的?谢谢@hpaulj。我回头看了看火炬,现在我知道我可以直接建立首席运营官了。我有python数据结构中的数据,我想将其作为中间数据结构写入csc矩阵,以便读入PyTorch。

我有一个定制的数字数据集,有100k个数据点和50M个稀疏特征。将此数据集加载到PyTorch中的最佳方式是什么


我正在寻找一些加载稀疏矩阵的函数,例如加载到稀疏张量中。

您使用
torch.sparse做了哪些尝试?它描述了
COO
输入。它与sparse.coo_矩阵不同,但足够接近。您是如何构建
csc
矩阵的?谢谢@hpaulj。我回头看了看火炬,现在我知道我可以直接建立首席运营官了。我有python数据结构中的数据,我想将其作为中间数据结构写入csc矩阵,以便读入PyTorch。