Pentaho数据集成MongoDB输入速度非常慢

Pentaho数据集成MongoDB输入速度非常慢,pentaho,pentaho-data-integration,Pentaho,Pentaho Data Integration,我需要从MongoDB中提取数据并放入数据库,MongoDB是一个副本集,有2个二级,我从二级读取MongoDB数据。 我设置了一个简单的转换(MongoDB输入到虚拟步骤)来测试速度,但MongoDB读取速度通常在200行/秒左右。 我觉得那太慢了 是否有人可以分享您的经验,MongoDB输入步骤的通常速度是多少,以及如何对其进行优化 谢谢 我最近没有使用mongodb,但我可能建议检查一些东西 您是从本地计算机还是远程服务器运行?如果是,当您运行转换时,您是否可以检查网络速度,因为您可能在网

我需要从MongoDB中提取数据并放入数据库,MongoDB是一个副本集,有2个二级,我从二级读取MongoDB数据。
我设置了一个简单的转换(MongoDB输入到虚拟步骤)来测试速度,但MongoDB读取速度通常在200行/秒左右。
我觉得那太慢了
是否有人可以分享您的经验,MongoDB输入步骤的通常速度是多少,以及如何对其进行优化

谢谢

我最近没有使用mongodb,但我可能建议检查一些东西

  • 您是从本地计算机还是远程服务器运行?如果是,当您运行转换时,您是否可以检查网络速度,因为您可能在网络上发送数据,这可能会很慢。 我们通常在运行数据库服务器上的转换时配置购物车服务器,以提高性能

  • 检查提交大小,您可能需要根据正在工作的流更改它,通常增加它有助于改进

  • 看看下面是否对你有帮助