[发明专利]业务模型强化学习方法以及装置在审
申请号: | 201811589792.5 | 申请日: | 2018-12-25 |
公开(公告)号: | CN110020728A | 公开(公告)日: | 2019-07-16 |
发明(设计)人: | 韩伟伟;周扬;任建伟 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06N20/00 | 分类号: | G06N20/00 |
代理公司: | 北京智信禾专利代理有限公司 11637 | 代理人: | 吴肖肖 |
地址: | 英属开曼群岛大开*** | 国省代码: | 开曼群岛;KY |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 强化学习 业务模型 目标业务 业务操作 业务策略 业务执行 样本 模型生成 曲线构建 业务目标 优化调整 申请 引入 | ||
本申请提供业务模型强化学习方法以及装置,所述业务模型强化学习方法,包括:获取业务样本;基于所述业务样本对初始业务模型进行强化学习,获得目标业务模型;所述初始业务模型基于执行业务操作所依赖的业务策略曲线构建;基于所述目标业务模型生成执行所述业务操作所依赖的目标业务策略曲线。本申请提供的业务模型强化学习方法,在采用曲线业务策略基础上引入强化学习进行优化调整,从而提升业务执行的有效性,尽可能达到设定的业务目标,获得更好的业务执行效果。
技术领域
本申请涉及强化学习技术领域,特别涉及一种业务模型强化学习方法。本申请同时涉及一种业务模型强化学习装置,一种计算设备,以及一种计算机可读存储介质。
背景技术
随着网络技术和电子商务快速发展,网络平台已成为用户进行日常消费的重要工具,企业也逐渐将更多的营销资源投入到互联网营销中,来适应用户行为的变化。在推荐系统或营销方案中,往往会涉及到多个阀值的策略,但这些策略本质上可能是不合理的,因为对于所有样本而言,不一定都是统一的阀值。
现有技术在使用推荐策略时,即使用推荐模型时,往往是采用固定阀值的推荐策略,统一批样本使用同样的阈值。但在样本量比较大的情况下,由于样本之间的巨大差异,不同样本使用统一阀值将无法得到好的推荐效果。
发明内容
有鉴于此,本申请实施例提供了一种业务模型强化学习方法,以解决现有技术中存在的技术缺陷。本申请实施例同时提供了一种业务模型强化学习装置,一种计算设备,以及一种计算机可读存储介质。
本申请实施例公开了一种业务模型强化学习方法,包括:
获取业务样本;
基于所述业务样本对初始业务模型进行强化学习,获得目标业务模型;所述初始业务模型基于执行业务操作所依赖的业务策略曲线构建;
基于所述目标业务模型生成执行所述业务操作所依赖的目标业务策略曲线。
可选的,所述业务样本包括:历史时间段内的业务样本;
相应的,所述基于所述业务样本对初始业务模型进行强化学习,获得目标业务模型,包括:
基于所述历史时间段内的业务样本,对所述初始业务模型进行强化学习,强化学习之后获得所述业务样本对应的学习奖励;
判断所述学习奖励是否大于或者等于目标奖励;
若是,将所述学习奖励对应的业务样本作为最优业务样本,并将基于所述最优业务样本进行强化学习之后的业务模型作为所述目标业务模型。
可选的,所述业务样本包括:历史时间段内的业务样本;
相应的,所述基于所述业务样本对初始业务模型进行强化学习,获得目标业务模型,包括:
基于所述历史时间段内的业务样本,对所述初始业务模型进行强化学习,获得所述业务样本对应的学习奖励;
将所述历史时间段内学习奖励最高的业务样本作为最优业务样本;
将所述最优业务样本对所述初始业务模型进行强化学习之后的业务模型,作为所述目标业务模型。
可选的,所述获取业务样本步骤执行之后,且所述基于所述业务样本对初始业务模型进行强化学习,获得目标业务模型步骤执行之前,包括:
确定在基准执行条件下执行所述业务操作的业务执行目标。
可选的,所述基于所述业务样本对初始业务模型进行强化学习,获得目标业务模型,包括:
基于所述业务样本对初始业务模型进行强化学习,强化学习之后获得业务模型;
基于所述业务模型生成执行所述业务操作的强化业务策略曲线;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811589792.5/2.html,转载请声明来源钻瓜专利网。