大型数据存储(是否为nosql)
我有大量需要存储的科学数据(150 TB+起始数据),我想知道存储数据的最佳方式(nosql或RDBMS等) 任何提示大型数据存储(是否为nosql),sql,mongodb,storage,Sql,Mongodb,Storage,我有大量需要存储的科学数据(150 TB+起始数据),我想知道存储数据的最佳方式(nosql或RDBMS等) 任何提示 James这实际上取决于您以后需要如何处理数据。如果数据是几个非常大的文件的集合,那么使用普通的文件系统就可以了。如果您需要能够搜索和分析数据,那么数据库可能是最好的解决方案 我也在科学环境中处理大型数据集。大多数数据都是表格形式的,当我们开始存储时,每个数据点都是一个表。最后,我们发现压缩表并将其存储在二进制blob中到数据库中要容易得多。在一个单独的表中,我们存储了关于这些
James这实际上取决于您以后需要如何处理数据。如果数据是几个非常大的文件的集合,那么使用普通的文件系统就可以了。如果您需要能够搜索和分析数据,那么数据库可能是最好的解决方案
我也在科学环境中处理大型数据集。大多数数据都是表格形式的,当我们开始存储时,每个数据点都是一个表。最后,我们发现压缩表并将其存储在二进制blob中到数据库中要容易得多。在一个单独的表中,我们存储了关于这些表的元数据。这实际上取决于您以后需要如何处理这些数据。如果数据是几个非常大的文件的集合,那么使用普通的文件系统就可以了。如果您需要能够搜索和分析数据,那么数据库可能是最好的解决方案
我也在科学环境中处理大型数据集。大多数数据都是表格形式的,当我们开始存储时,每个数据点都是一个表。最后,我们发现压缩表并将其存储在二进制blob中到数据库中要容易得多。在一个单独的表中,我们存储了关于这些表的元数据。回答这个问题以从NoSQL或RDBMS中选择:“我的数据是在关系中结构化的吗?”回答这个问题以从NoSQL或RDBMS中选择:“我的数据是在关系中结构化的吗?”科学数据有专门的数据库:科学数据有专门的数据库:它必须是一种数据库类型吗?NoSQL的一部分意味着一个尺寸不能适合所有尺寸,那么为什么不使用两个或更多的NoSQL呢?一个列存储和一个图形数据库怎么样 它必须是一种数据库类型吗?NoSQL的一部分意味着一个尺寸不能适合所有尺寸,那么为什么不使用两个或更多的NoSQL呢?一个列存储和一个图形数据库怎么样 你应该看看和。此外,考虑使用访问和提取数据。
您应该查看和查看。此外,考虑使用访问和提取数据。