热线电话:13121318867

登录
2020-03-27 阅读量: 579
推荐系统如何评估模型准确率?

评测指标用于评测推荐系统的性能,有些可以定量计算,有些只能定性描述。

1)用户满意度

用户满意度是评测推荐系统的重要指标,无法离线计算,只能通过用户调查或者在线实验获得。

调查问卷,需要考虑到用户各方面的感受,用户才能针对问题给出准确的回答。

在线系统中,用户满意度通过统计用户行为得到。比如用户如果购买了推荐的商品,就表示他们在一定程度上满意,可以用购买率度量用户满意度。

一般情况,我们可以用用户点击率、停留时间、转化率等指标度量用户的满意度。

2)预测准确度

预测准确度,度量的是推荐系统预测用户行为的能力。 是推荐系统最重要的离线评测指标。

大部分的关于推荐系统评测指标的研究,都是针对预测准确度的。因为该指标可以通过离线实验计算,方便了学术界的研究人员。

3)覆盖率

覆盖率(coverage)是描述一个推荐系统对物品长尾的发掘能力。

最简单的定义是,推荐系统推荐出来的物品占总物品的比例。

4)多样性

为了满足用户广泛的兴趣,推荐列表需要能够覆盖用户不同兴趣的领域,即需要具有多样性。

5)新颖性

新颖性也是影响用户体验的重要指标之一。它指的是向用户推荐非热门非流行物品的能力。

评测新颖度最简单的方法,是利用推荐结果的平均流行度,因为越不热门的物品,越可能让用户觉得新颖。

此计算比较粗糙,需要配合用户调查准确统计新颖度。

0.0000
1
关注作者
收藏
评论(0)

发表评论

暂无数据
推荐帖子