CogComp NLP:它是多线程的吗?

CogComp NLP:它是多线程的吗?,nlp,Nlp,是否有可能以多线程方式在大量语料库上运行管道?不幸的是,我在他们的自述中没有提到线程安全。对这个问题的想法表示赞赏 仅就命名实体识别功能而言,它是线程安全的,我在一个并行工作流引擎中使用了它,可以毫无问题地处理数百万(大约90个)文档。我不能权威地谈论该系统中的其他功能,而且还有很多。我将进一步将NER的多线程功能描述为“可重入者”,这意味着您可以跨多个线程重用单个实例。对于这些类型的系统,特征向量往往比较大,因此可以节省一些内存占用,并跨多个线程共享NER模型的单个实例

是否有可能以多线程方式在大量语料库上运行管道?不幸的是,我在他们的自述中没有提到线程安全。对这个问题的想法表示赞赏

仅就命名实体识别功能而言,它是线程安全的,我在一个并行工作流引擎中使用了它,可以毫无问题地处理数百万(大约90个)文档。我不能权威地谈论该系统中的其他功能,而且还有很多。我将进一步将NER的多线程功能描述为“可重入者”,这意味着您可以跨多个线程重用单个实例。对于这些类型的系统,特征向量往往比较大,因此可以节省一些内存占用,并跨多个线程共享NER模型的单个实例