Maxlength AllenNLP问答的通道长度限制

Maxlength AllenNLP问答的通道长度限制,maxlength,question-answering,allennlp,Maxlength,Question Answering,Allennlp,我是AllenNLP的新手,目前正在使用它预先训练好的问答模型。我想知道它是否有一个通道长度限制,以确保其性能?我知道BERT的最大长度为512,并且会截断更长的段落 我在AllenNLP上尝试了更长的段落,似乎效果不错,但我只想确认一下。谢谢。是的,这种模式确实限制了文章的长度(上下文)以及潜在的问题。您可以在API文档中阅读更多关于它是如何做到这一点的信息: 但总而言之,当文章+问题包含超过length\u limit标记时,通过滑动stride标记窗口,文章将被解析为多个输入实例。谢谢您的

我是AllenNLP的新手,目前正在使用它预先训练好的问答模型。我想知道它是否有一个通道长度限制,以确保其性能?我知道BERT的最大长度为512,并且会截断更长的段落


我在AllenNLP上尝试了更长的段落,似乎效果不错,但我只想确认一下。谢谢。

是的,这种模式确实限制了文章的长度(上下文)以及潜在的问题。您可以在API文档中阅读更多关于它是如何做到这一点的信息:


但总而言之,当文章+问题包含超过
length\u limit
标记时,通过滑动
stride
标记窗口,文章将被解析为多个输入实例。

谢谢您的回答!我可以知道AllenNLP是否可以做开放域问答或多通道问答吗?我想知道如果我的文章有10万字,我该如何使用AllenNLP。非常感谢。