elasticsearch Elasticsearch Reindex API速度变慢,elasticsearch,elasticsearch" /> elasticsearch Elasticsearch Reindex API速度变慢,elasticsearch,elasticsearch" />

elasticsearch Elasticsearch Reindex API速度变慢

elasticsearch Elasticsearch Reindex API速度变慢,elasticsearch,elasticsearch,我的索引中有8800万个文档,0个副本,一个SSD上有1个碎片。当我使用reindex API(大小为3000,刷新间隔为-1)时,当我们超过5000万标记时,它开始变慢 我想ES正在检查文档是否存在?有没有一种方法可以重新索引和剥离旧文档ID,以便ES可以生成新的ID并更快地索引 另外,如何从特定点重新编制索引?我遇到的问题是,我必须暂停新传入文档的队列,直到重新索引完成,然后切换别名。如果我能让源索引仍然获得新文档,然后在进行大的重新索引时启动新的重新索引来移动这些新闻文档,那就太棒了。在重

我的索引中有8800万个文档,0个副本,一个SSD上有1个碎片。当我使用reindex API(大小为3000,刷新间隔为-1)时,当我们超过5000万标记时,它开始变慢

我想ES正在检查文档是否存在?有没有一种方法可以重新索引和剥离旧文档ID,以便ES可以生成新的ID并更快地索引


另外,如何从特定点重新编制索引?我遇到的问题是,我必须暂停新传入文档的队列,直到重新索引完成,然后切换别名。如果我能让源索引仍然获得新文档,然后在进行大的重新索引时启动新的重新索引来移动这些新闻文档,那就太棒了。

在重新索引调用中添加了floowing脚本以解决此问题:

ctx.remove('_id');