Warning: file_get_contents(/data/phpspider/zhask/data//catemap/0/assembly/5.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Nlp 计算问答对之间相关性得分的方法是什么?_Nlp_Information Retrieval_Question Answering - Fatal编程技术网

Nlp 计算问答对之间相关性得分的方法是什么?

Nlp 计算问答对之间相关性得分的方法是什么?,nlp,information-retrieval,question-answering,Nlp,Information Retrieval,Question Answering,在信息检索或问答系统中,我们使用TD-IDF或BM25计算问题对的相似性分数,作为深度学习的基线或粗略排序 在社区问答中,我们已经有了问答对来收集一些统计信息。如果没有深入的学习,我们能发明一种像BM25这样的算法来计算问题-答案对的相关性得分吗 有哪些方法可以做到这一点 如果没有深入的学习,我们能发明像BM25这样的算法来 计算问题-答案对的相关性得分 是的,有很多方法。为了让你的问题更有针对性,让我们回答一下,在不使用问答的情况下,计算问答对相关性的可能方法有哪些 一些例子和解释: TF-I

在信息检索或问答系统中,我们使用TD-IDF或BM25计算问题对的相似性分数,作为深度学习的基线或粗略排序

在社区问答中,我们已经有了问答对来收集一些统计信息。如果没有深入的学习,我们能发明一种像BM25这样的算法来计算问题-答案对的相关性得分吗

有哪些方法可以做到这一点

如果没有深入的学习,我们能发明像BM25这样的算法来 计算问题-答案对的相关性得分

是的,有很多方法。为了让你的问题更有针对性,让我们回答一下,在不使用问答的情况下,计算问答对相关性的可能方法有哪些

一些例子和解释:

TF-IDF[你提到的]实际上是一种特征提取技术。使用它,您可以从上下文中检索哪些单词对于每个文档都是存在的/重要的-通过它,您可以比较两个类似的单词,这就是BM25所做的

另一种技术是使用,这是谷歌使用的算法。实际上,您可以尝试复制它,因为它并不太复杂

另一种方法是使用图形来实现。我是在硕士研究中做的,你可以读我的论文

除此之外,我建议你检查一下这篇论文,看看其他问答的例子,如果你理解了这些概念,你可以很容易地找到问答匹配:和

同时,不断检查最新的结果和技术