Jaccard相似度用于比较两个集合有多相似。把同一问题两次回答中出现的商户分别记为集合,交集数量除以并集数量,就是两次回答的重合率。

一个简单例子

第一次出现甲、乙、丙,第二次出现乙、丙、丁;交集是乙和丙,共2家,并集共4家,Jaccard相似度为50%。

为什么有用

平均提及率相同,可能来自稳定重复出现,也可能来自每轮随机更换商户。稳定性指标能帮助识别这两种完全不同的情况。

它不说明什么

高稳定只说明结果重复性较强,不说明答案正确,也不说明被提到的商户质量更高。