AI开发平台MODELARTS-向量召回评估:概述

时间:2024-05-28 16:22:36

概述

向量召回评估算子计算召回的hitrate,用于评估召回结果的好坏,hitrate越高表示训练产出的向量去召回向量的结果越准确。支持u2i召回和i2i召回的计算。u2i召回时,拿user(用户)的向量去召回top k个items(物品),i2i召回时拿item的向量去召回top k个items。 hitrate的具体计算方法为,假设真实trigger(u2i召回时为user,i2i召回时为item)的关联item集合为M,而实际召回了top k个和trigger相似的items,如果其中落在了M里的集合为N,则top k hitrate为|N| / |M|。

support.huaweicloud.com/devtool-modelarts/devtool-modelarts_0268.html