Nlp 什么是甲骨文实验?

Nlp 什么是甲骨文实验?,nlp,machine-learning,Nlp,Machine Learning,我读过一篇关于机器学习的论文,其中包含一个甲骨文实验,用来比较他的研究和另一项研究? 但什么是甲骨文实验似乎并不那么清楚。甲骨文是一个总是给出正确答案的虚构实体。oracle实验用于将您的实际系统与您的系统的某些组件总是做正确的事情时的表现进行比较 例如,在NLP域中,假设您构建了一个解析器,该解析器将词性(POS)标记的句子作为输入。在现实世界中,你必须通过一个真正的词性标记来运行真正的句子。此标记器可能会产生精度高于90%但低于100%的结果。由于解析器的准确性取决于传入标记的准确性,因此这

我读过一篇关于机器学习的论文,其中包含一个甲骨文实验,用来比较他的研究和另一项研究? 但什么是甲骨文实验似乎并不那么清楚。

甲骨文是一个总是给出正确答案的虚构实体。oracle实验用于将您的实际系统与您的系统的某些组件总是做正确的事情时的表现进行比较

例如,在NLP域中,假设您构建了一个解析器,该解析器将词性(POS)标记的句子作为输入。在现实世界中,你必须通过一个真正的词性标记来运行真正的句子。此标记器可能会产生精度高于90%但低于100%的结果。由于解析器的准确性取决于传入标记的准确性,因此这种损失将对解析器的性能产生负面影响

为了了解如果POS标记器是完美的,解析器的性能会如何,您可以使用oracle标记器运行一个实验。在这个实验中,你将用一个程序来替换真正的词性标记器,这个程序知道句子的实际词性标记,因此总是以100%的准确率返回标记结果


因此,如果您的解析器在使用真正的标记器的实验中获得85%的准确率,在使用oracle标记器的实验中获得90%的准确率,那么您就知道5%的性能损失是直接由于标记器的错误造成的。

真的会大大提高您的机会,至少有人对您的要求有一个简单、遥远的想法,如果你能麻烦自己,至少提供一个参考链接?我只理解最后两个词“参考链接”