[发明专利]虚拟资源投放方法、装置、服务器及计算机可读存储介质

说明书

本申请公开了一种虚拟资源投放方法、装置、服务器及计算机可读存储介质，属于互联网技术领域。该方法包括根据历史曝光记录，确定当前时间片虚拟资源的期望曝光量；基于上一时间片的实际曝光量、上一时间片的期望曝光量和上一时间片的用户转化数，确定上一时间片的状态向量；根据上一时间片的状态向量计算当前时间片的奖励函数；基于上一时间片的状态向量和当前时间片的奖励函数，对当前时间片的期望曝光量进行调整，从而得到调整后的曝光量；根据调整后的曝光量，进行当前时间片的虚拟资源投放。一定程度上可以减小当前时间片的虚拟资源投放量和实际曝光量之间的差值，从而提高了虚拟资源的曝光率，使得当前时间片的用户转化率得到提高。

技术领域

本申请实施例涉及互联网技术领域，特别涉及一种虚拟资源投放方法、装置、服务器及计算机可读存储介质。

背景技术

随着互联网技术的不断发展，互联网中虚拟资源的市场也在快速发展中，人们对互联网的虚拟资源的接受度和认可度也越来越高。

如何投放虚拟资源，是互联网技术领域十分关注的问题。

发明内容

本申请实施例提供了一种虚拟资源投放方法、装置、服务器及计算机可读存储介质，可用于解决相关技术中的问题。该技术方案如下：

一方面，本申请实施例提供了一种虚拟资源投放方法，该方法包括：

根据历史曝光记录，确定虚拟资源在当前时间片的期望曝光量；

基于上一时间片的实际曝光量、所述上一时间片的期望曝光量和所述上一时间片的用户转化数，确定所述上一时间片的状态向量；

根据所述上一时间片的状态向量，计算所述当前时间片的奖励函数；

基于所述上一时间片的状态向量和当前时间片的奖励函数对所述当前时间片的期望曝光量进行调整，得到调整后的曝光量；

根据所述调整后的曝光量，进行当前时间片的虚拟资源投放。

在一种可能的实现方式中，所述根据历史曝光记录，确定虚拟资源在当前时间片的期望曝光量，包括：

根据历史曝光记录，按照下述公式确定当前时间片的期望曝光量Exposure_e(t)：

其中，所述Exposure_total为目标时间段的期望曝光量，所述Req(t)为历史N个目标时间段中第d个目标时间段中第t个时间片的曝光量，所述为历史N个目标时间段中每一个目标时间段的实际曝光量，所述N为大于等于1的整数，所述t表示当前时间片。

在一种可能的实现方式中，所述根据所述上一时间片的状态向量，计算所述当前时间片的奖励函数，包括：

基于所述上一时间片的状态向量，按照下述公式计算所述当前时间片的奖励函数reward(t)：

其中，所述Exposure(t-1)为上一时间片的实际曝光量，所述Exposure_e(t-1)为上一时间片的期望曝光量，所述Conversion(t-1)为上一时间片的用户转化数，所述x为常数，所述y为常数，所述t表示当前时间片。

在一种可能的实现方式中，所述上一时间片的用户转化数包括上一时间片的总请求量和请求用户平均转化分数、上一时间片的曝光用户数和曝光用户平均转化分数、上一时间片的转化用户和转化用户平均转化分数中的至少一个。

在一种可能的实现方式中，所述基于所述上一时间片的状态向量和当前时间片的奖励函数对所述当前时间片的期望曝光量进行调整，得到调整后的曝光量，包括：