我们主要从透明度、可理解度、准确度、决策速度、劝说度、信任度、用户满意度七个维度的标准进行评估。
1.透明度:解释推荐系统是如何运作的,一般是通过测量用户在使用推荐系统时对推荐原理的理解程度来进行评估,例如:问卷调查、访谈等。在评价过程中,透明度往往跟可理解度和信任度关联起来。
2.可理解度:即允许用户纠正推荐系统的错误,它通常是伴随在透明度之后的。测量可理解度时,首先必须先解决界面问题,也就是用户能否很快地发现可以纠错或改正的版块区域。
3.准确度:对于推荐解释来说,是指代推荐解释能否正确地说明推荐的原由。测量解释的准确度时常用的方法有对比基于解释对商品的评分和基于实际商品体验的评分、对比有解释和没有解释的推荐系统用户的满意度等方法。
4.决策速度:即帮助用户更快地做出决策,一般来说,可通过测量用户与系统的对话时间总长以及系统与用户间的对话次数(直到用户选中满意的产品)来评定决策速度。
5.劝说度:说服用户尝试或者购买的力度。劝说度可以通过对比用户在看到解释前后对产品的两次评分、对比用户在拥有解释和没有解释的推荐系统推荐下所尝试或购买产品的数目等方法进行测量。
6.信任度:即提升用户对推荐系统的信心和信任,往往与透明度、准确度相关联。问卷调查的方式是测量信任度的一个非常有效的方法,但是有时并不能完全代表用户的行为。因此,还需要间接地通过测量用户忠诚度和销量增长等来测量信任度。
7.用户满意度:增加用户在使用推荐系统时的舒适度和实用度。对于用户满意度的测量,可以借用调查问卷或者访谈等方式去了解用户对于推荐系统以及推荐解释的体验和感受。

标签: none

相关文章推荐

添加新评论,含*的栏目为必填