本公开关于校验方法、装置、电子设备和存储介质,该校验方法包括:获取预设时长内多个抽样账户的多媒体资源使用信息;针对多个抽样账户中的每个抽样账户,基于本次获取的每个抽样账户的多媒体资源使用信息及历次获取的每个抽样账户的多媒体资源使用信息,确定针对每个抽样账户的用于表征同一多媒体资源被重复使用的重复使用事件信息;基于针对多个抽样账户的重复使用事件信息,对多媒体资源推荐模型的去重性能进行校验。通过线下的方式获取多媒体资源使用信息,进而对多媒体资源推荐模型的去重性能进行校验,无需访问在线下发历史服务数据,可以避免在线下发历史服务数据被误操作的情况的出现,进而保证了多媒体资源推荐的稳定性。定性。定性。
【技术实现步骤摘要】
校验方法、装置、电子设备和存储介质
[0001]本公开涉及计算机
,更具体地说,涉及校验方法、装置、电子设备和存储介质。
技术介绍
[0002]随着多媒体资源用户的不断增加,用户反馈的各类问题的数量也急剧增多,通过对收集的多媒体资源推荐类问题进行梳理和分析发现,多媒体资源重复推荐问题是影响用户体验的主要问题。
[0003]相关技术中,在测试多媒体资源推荐模型的去重性能是否符合要求时,需要访问多媒体资源推荐模型的在线下发历史服务数据,基于在线下发历史服务数据的访问结果统计是否存在重复推荐同一个多媒体资源的情况,进而根据统计结果评估多媒体资源推荐模型的去重性能。但是,采用此种方式测试多媒体资源推荐模型的去重性能,可能出现在线下发历史服务数据被误操作的情况,进而导致多媒体资源的推荐性能变差。
技术实现思路
[0004]本公开提供校验方法、装置、电子设备和存储介质,以至少解决上述相关技术中,在测试多媒体资源推荐模型的去重性能是否符合要求时,可能出现在线下发历史服务数据被误操作的情况,进而导致多媒体资源的推荐性能变差的问题。
[0005]根据本公开实施例的第一方面,提供一种校验方法,所述校验方法包括:获取预设时长内多个抽样账户的多媒体资源使用信息,其中,抽样账户的多媒体资源使用信息用于描述所述抽样账户对通过多媒体资源推荐模型所推荐的多媒体资源的使用情况;针对所述多个抽样账户中的每个抽样账户,基于本次获取的所述每个抽样账户的多媒体资源使用信息及历次获取的所述每个抽样账户的多媒体资源使用信息,确定针对所述每个抽样账户的用于表征同一多媒体资源被重复使用的重复使用事件信息;基于针对所述多个抽样账户的重复使用事件信息,对所述多媒体资源推荐模型的去重性能进行校验,其中,所述去重性能指示避免重复推荐同一多媒体资源的性能。
[0006]可选地,基于针对所述多个抽样账户的重复使用事件信息,对所述多媒体资源推荐模型的去重性能进行校验的步骤包括:基于针对所述多个抽样账户的重复使用事件信息,得到每个去重评价指标的指标值;当确定的去重评价指标的指标值超过对应的报警阈值时,确定所述多媒体资源推荐模型的去重性能异常。
[0007]可选地,所述基于针对所述多个抽样账户的重复使用事件信息,得到每个去重评价指标的指标值,包括:针对所述预设时长内所包含的各个时间间隔中的每个时间间隔,确定所述每个时间间隔内重复使用事件的数量与所述每个时间间隔内被使用的多媒体资源的数量之间的第一比值;将各个时间间隔对应的第一比值的统计值,作为所述去重评价指标的指标值。
[0008]可选地,所述基于针对所述多个抽样账户的重复使用事件信息,得到每个去重评
价指标的指标值,包括:针对所述预设时长内所包含的各个时间间隔中的每个时间间隔,确定所述每个时间间隔内重复使用事件所指示的被重复使用的多媒体资源的被重复使用次数之和与所述每个时间间隔内被使用的多媒体资源的数量之间的第二比值;将各个时间间隔对应的第二比值的统计值,作为所述去重评价指标的指标值。
[0009]可选地,针对所述多个抽样账户中的每个抽样账户,基于本次获取的所述每个抽样账户的多媒体资源使用信息及历次获取的所述每个抽样账户的多媒体资源使用信息,确定针对所述每个抽样账户的用于表征同一多媒体资源被重复使用的重复使用事件信息的步骤包括:针对每个抽样账户,对本次获取的所述每个抽样账户的多媒体资源使用信息彼此之间进行重复判定,以得到第一重复使用统计信息;针对每个抽样账户,对本次获取的所述每个抽样账户的多媒体资源使用信息和历次获取的所述每个抽样账户的多媒体资源使用信息之间进行重复判定,以得到第二重复使用统计信息;基于所述每个抽样账户的第一重复使用统计信息和第二重复使用统计信息,确定针对所述每个抽样账户的用于表征同一多媒体资源被重复使用的重复使用事件信息。
[0010]可选地,所述校验方法还包括:对在所述预设时长内上报了多媒体资源使用信息的多个账户中的每个账户与预设抽样数值之间进行取模运算,获得至少一个运算结果;将所述多个账户中对应的运算结果为预设运算结果的账户,确定为所述多个抽样账户。
[0011]根据本公开实施例的第二方面,提供一种校验装置,包括:获取模块,被配置为获取预设时长内多个抽样账户的多媒体资源使用信息,其中,抽样账户的多媒体资源使用信息用于描述所述抽样账户对通过多媒体资源推荐模型所推荐的多媒体资源的使用情况;第一确定模块,被配置为针对所述多个抽样账户中的每个抽样账户,基于本次获取的所述每个抽样账户的多媒体资源使用信息及历次获取的所述每个抽样账户的多媒体资源使用信息,确定针对所述每个抽样账户的用于表征同一多媒体资源被重复使用的重复使用事件信息;校验模块,被配置为基于针对所述多个抽样账户的重复使用事件信息,对所述多媒体资源推荐模型的去重性能进行校验,其中,所述去重性能指示避免重复推荐同一多媒体资源的性能。
[0012]可选地,所述校验模块被配置为:基于针对所述多个抽样账户的重复使用事件信息,得到每个去重评价指标的指标值;当确定的去重评价指标的指标值超过对应的报警阈值时,确定所述多媒体资源推荐模型的去重性能异常。
[0013]可选地,所述校验模块被配置为:针对所述预设时长内所包含的各个时间间隔中的每个时间间隔,确定所述每个时间间隔内重复使用事件的数量与所述每个时间间隔内被使用的多媒体资源的数量之间的第一比值;将各个时间间隔对应的第一比值的统计值,作为所述去重评价指标的指标值。
[0014]可选地,所述校验模块被配置为:针对所述预设时长内所包含的各个时间间隔中的每个时间间隔,确定所述每个时间间隔内重复使用事件所指示的被重复使用的多媒体资源的被重复使用次数之和与所述每个时间间隔内被使用的多媒体资源的数量之间的第二比值;将各个时间间隔对应的第二比值的统计值,作为所述去重评价指标的指标值。
[0015]可选地,所述第一确定模块被配置为:针对每个抽样账户,对本次获取的所述每个抽样账户的多媒体资源使用信息彼此之间进行重复判定,以得到第一重复使用统计信息;针对每个抽样账户,对本次获取的所述每个抽样账户的多媒体资源使用信息和历次获取的
所述每个抽样账户的多媒体资源使用信息之间进行重复判定,以得到第二重复使用统计信息;基于所述每个抽样账户的第一重复使用统计信息和第二重复使用统计信息,确定针对所述每个抽样账户的用于表征同一多媒体资源被重复使用的重复使用事件信息。
[0016]可选地,所述校验装置还包括:取模运算模块,被配置为对在所述预设时长内上报了多媒体资源使用信息的多个账户中的每个账户与预设抽样数值之间进行取模运算,获得至少一个运算结果;第二确定模块,被配置为将所述多个账户中对应的运算结果为预设运算结果的账户,确定为所述多个抽样账户。
[0017]根据本公开实施例的第三方面,提供一种电子设备,包括:处理器;用于存储所述处理器可执行指令的存储器;其中,所述处理器被配置为执行所述指令,以实现根据本公开的校验方法。
[0018]根据本公开实本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种校验方法,其特征在于,所述校验方法包括:获取预设时长内多个抽样账户的多媒体资源使用信息,其中,抽样账户的多媒体资源使用信息用于描述所述抽样账户对通过多媒体资源推荐模型所推荐的多媒体资源的使用情况;针对所述多个抽样账户中的每个抽样账户,基于本次获取的所述每个抽样账户的多媒体资源使用信息及历次获取的所述每个抽样账户的多媒体资源使用信息,确定针对所述每个抽样账户的用于表征同一多媒体资源被重复使用的重复使用事件信息;基于针对所述多个抽样账户的重复使用事件信息,对所述多媒体资源推荐模型的去重性能进行校验,其中,所述去重性能指示避免重复推荐同一多媒体资源的性能。2.如权利要求1所述的校验方法,其特征在于,基于针对所述多个抽样账户的重复使用事件信息,对所述多媒体资源推荐模型的去重性能进行校验的步骤包括:基于针对所述多个抽样账户的重复使用事件信息,得到每个去重评价指标的指标值;当确定的去重评价指标的指标值超过对应的报警阈值时,确定所述多媒体资源推荐模型的去重性能异常。3.如权利要求2所述的校验方法,其特征在于,所述基于针对所述多个抽样账户的重复使用事件信息,得到每个去重评价指标的指标值,包括:针对所述预设时长内所包含的各个时间间隔中的每个时间间隔,确定所述每个时间间隔内重复使用事件的数量与所述每个时间间隔内被使用的多媒体资源的数量之间的第一比值;将各个时间间隔对应的第一比值的统计值,作为所述去重评价指标的指标值。4.如权利要求2所述的校验方法,其特征在于,所述基于针对所述多个抽样账户的重复使用事件信息,得到每个去重评价指标的指标值,包括:针对所述预设时长内所包含的各个时间间隔中的每个时间间隔,确定所述每个时间间隔内重复使用事件所指示的被重复使用的多媒体资源的被重复使用次数之和与所述每个时间间隔内被使用的多媒体资源的数量之间的第二比值;将各个时间间隔对应的第二比值的统计值,作为所述去重评价指标的指标值。5.如权利要求1所述的校验方法,其特征在于,针对所述多个抽样账户中的每个抽样账户,基于本次获取的所述每个抽样账户的多媒体资源使用信息及历次获取的所述每个抽样账户的多媒体资源使用信息,确定针对所述每个抽样账户的...
【专利技术属性】
技术研发人员:王翠萍,徐磊,
申请(专利权)人:北京达佳互联信息技术有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。