[发明专利]基于强化学习的设计资源能力评估方法

说明书

本发明公开了一种基于强化学习的设计资源能力评估方法，以服务商历史交易数据以及当前设计资源数据为状态数据，以推送最大能力评估值的服务商为动作，并采用树状结构构建经验回放集合，基于强化学习在各个领域内评估服务商的能力广度分值和能力宽度分值，从而了解服务商的综合能力、成长能力和承担能力，并基于强化学习自学习自演进的构想，对服务商不仅依赖数据还依据质量进行合理评估，能够了解当前服务商的综合能力、成长能力以及承担能力，为众包平台提供更客观的能力反馈信息，也能为众包平台的个性化推送服务提供服务商的数据支撑。

技术领域

本发明属于计算机数据处理技术领域，具体地说，是涉及一种基于强化学习的设计资源能力评估方法。

背景技术

能力是完成某项活动所需具备的基本素质。传统的能力评价理论将能力划分为一般能力和特殊能力，其中一般能力指的是应对基本活动的能力，比如观察能力和思考的能力；而特殊能力指的是在从事某些特定活动所表现出的与经验相关的能力，比如设计能力、宣传能力、管理能力等。因此，能力是多样化的，每个服务商/商户在不同的设计领域中所表现出来的能力也有所不同。在服务平台中，能力域是一个重要的组成部分，与平台的运行、任务的完成、知识资源的积累都有着密不可分的联系。

设计资源服务需求是指需要利用外部资源服务来完成产品设计过程，主要是智力资源服务需求、知识资源服务需求、工具资源服务需求以及其它服务需求，其属性主要包括基本属性、目标属性和服务属性。因此随着设计能力主体所完成的设计任务数量的提高，其设计能力将会不断成长，而这种成长特性决定了无法依靠静态的数学模型来分析评价设计能力。基于己完成设计任务数量及相应的任务完成表现评价设计能力水平，是一种有效地途径。

众包网站中存在各种类型的服务提供商，这些服务商/商户基于众包网站完成来自各个地域的客户的设计需求，并在平台上展示了大大小小的设计资源，正确的整合商户的设计资源及其能力范围成为了一项重要的任务，与传统商家的能力值口口相传的‘评价’模式相比，平台方对服务商/商户的能力评估提供了更为客观且直接的等级分配模式。

但是，由于受到各方面技术的限制，目前的方法依然缺少动态性，例如，设计资源中的文字部分无法量化为数值形式，只是简单地根据学习项目的完成比例以及用户的好评率统计数据来掌握服务商/商户的能力情况，无法了解服务商/商户对特定的领域的能力程度，也无法掌握单个服务商/商户的能力程度。因此，很多众包平台对特定的领域设计资源的评判没有针对性的效果评估和反馈机制，表现出了能力评估不准确，客户无法真正了解服务商/商户的水平的问题，使得众包平台上优秀的设计资源难以被挖掘，新兴的设计资源难发展。

评价设计资源能力单元的能力不能仅仅根据其单次设计任务的表现或者根据某一时间节点的设计能力单元测试结果，而应该从多个层面对设计能力影响因素进行分析并给出综合评判。能力是一种综合素质的体现，在评价时既要体现整体性，也要具有区分性，既能说明个体的综合能力，也能体现其优势和所擅长的方面。

发明内容

本发明的目的在于提供一种基于强化学习的设计资源能力评估方法，基于强化学习自学习自演进的特点，从服务商的历史设计任务，从多个角度出发，动态的设计了一种设计资源能力评估方法，对服务商设计能力进行分析并给出综合判断。

本发明采用以下技术方案予以实现：

提出一种基于强化学习的设计资源能力评估方法，包括：获取众包平台中服务商的历史交易数据和设计资源数据；基于以下步骤得到服务商设计资源特征：提取所述设计资源信息数据得到的设计资源共性，量化所述历史交易数据得到交易等级，提取所述历史交易数据得到广度资源划分数据，提取所述设计资源信息数据得到的描述标签，以及，获取前一时刻强化学习得到的能力评估结果；以时间为序构建树状结构集合作为强化学习的经验回放集合；以服务商为单位，以服务商的历史交易数据和服务商设计资源特征为强化学习的状态，以推送最大能力评估值的服务商为强化学习的动作，基于强化学习得到服务商的设计资源能力评估结果。