Statistics 如何知道一个系统明显优于另一个系统?

Statistics 如何知道一个系统明显优于另一个系统?,statistics,Statistics,我在学习词汇语义学。我有65对同义词与它们的意义相关。数据集来源于论文: 鲁宾斯坦、赫伯特和约翰·B·古德够了。《同义词的语境关联》,《ACM通讯》8.10(1965):627-633 我提取包含这些同义词的句子,将这些句子中出现的相邻单词转换为向量,计算不同向量之间的余弦距离,最后得到我们计算的距离与Rubenstein和Goodenough给出的意义相关性之间的Pearson相关性 例如,我得到方法1的皮尔逊相关系数为0.79,方法2的皮尔逊相关系数为0.78。我如何衡量方法1是否明显优于方

我在学习词汇语义学。我有65对同义词与它们的意义相关。数据集来源于论文:

鲁宾斯坦、赫伯特和约翰·B·古德够了。《同义词的语境关联》,《ACM通讯》8.10(1965):627-633

我提取包含这些同义词的句子,将这些句子中出现的相邻单词转换为向量,计算不同向量之间的余弦距离,最后得到我们计算的距离与Rubenstein和Goodenough给出的意义相关性之间的Pearson相关性


例如,我得到方法1的皮尔逊相关系数为0.79,方法2的皮尔逊相关系数为0.78。我如何衡量方法1是否明显优于方法2?

严格来说,这不是一个编程问题,但由于这个问题在其他stackexchange站点中没有答案,我将告诉您我将采取的方法

我想说的是,还有其他基准来检查您在类似任务上的方法。您可以检查您的方法在这些基准上的执行情况,并分析结果。有些方法可能更能捕捉相似性,而另一些方法则更能捕捉相关性,有些则两者兼而有之

这是一个链接,它会自动为向量打分并提供结果