Language agnostic 如何为pregel划分图以最大化处理速度?

Language agnostic 如何为pregel划分图以最大化处理速度?,language-agnostic,scaling,Language Agnostic,Scaling,我有一个众包应用程序。从用户那里收集数据,然后进行处理,然后进行更新,让每个人都能看到。数据收集几乎是实时的。处理速度随着用户数据节点的增加而增加。我需要扩大规模 看看基于图形的模型的缩放,mapreduce似乎很有名。是否有将其与其他技术进行比较的基准文件?普雷格尔令人印象深刻。请给我指出有关pregel中“分区”的任何线索,即如何智能地对图形进行分区,以最大限度地减少相互落后的进程。为了最大限度地减少执行时间,对图形进行“智能”分区是一个有趣的问题,然而,这并不简单,它取决于您的数据和算法。

我有一个众包应用程序。从用户那里收集数据,然后进行处理,然后进行更新,让每个人都能看到。数据收集几乎是实时的。处理速度随着用户数据节点的增加而增加。我需要扩大规模


看看基于图形的模型的缩放,mapreduce似乎很有名。是否有将其与其他技术进行比较的基准文件?普雷格尔令人印象深刻。请给我指出有关pregel中“分区”的任何线索,即如何智能地对图形进行分区,以最大限度地减少相互落后的进程。

为了最大限度地减少执行时间,对图形进行“智能”分区是一个有趣的问题,然而,这并不简单,它取决于您的数据和算法。 您可能还会发现,在实践中,这是不必要的,而且随机分区已经足够好了

例如,如果您对探索类似Pregel的方法感兴趣,您可以查看并试验不同的分区技术