Amazon dynamodb 将大量虚拟数据加载到DynamoDB全局表

Amazon dynamodb 将大量虚拟数据加载到DynamoDB全局表,amazon-dynamodb,Amazon Dynamodb,我想创建一个DynamoDB全局表,并将大量数据加载到其中进行测试。数据是虚拟数据,没有特殊要求。全局表数据大小将为70GB 我将使用Jmeter来执行java采样器,以在EC2实例上加载数据,使用DynamoDB VPC端点,java采样器将使用batchItemWrite将数据写入表 DynamoDB对项目大小有400KB的限制,即使我使用了batchItemwrite和多个jmeter线程来加载数据。要加载70 GB的数据,似乎还需要24小时以上 有没有更好的解决方案来提高数据加载到Dyn

我想创建一个DynamoDB全局表,并将大量数据加载到其中进行测试。数据是虚拟数据,没有特殊要求。全局表数据大小将为70GB

我将使用Jmeter来执行java采样器,以在EC2实例上加载数据,使用DynamoDB VPC端点,java采样器将使用batchItemWrite将数据写入表

DynamoDB对项目大小有400KB的限制,即使我使用了batchItemwrite和多个jmeter线程来加载数据。要加载70 GB的数据,似乎还需要24小时以上


有没有更好的解决方案来提高数据加载到DynamoDB表的性能?欢迎发表任何意见。

您能使用更多EC2实例吗?尝试在EMR上使用Hive,如下所示