[发明专利]人机交互方法、服务端、客户端及存储介质

说明书

本发明提供一种用于服务端的人机交互方法、服务端与用于客户端的人机交互方法、客户端及存储介质。方法包括：接收客户端发送的与当前用户的咨询问题相关的咨询信息，咨询信息包括用户文本信息和/或用户语音信息；将咨询信息以文本形式输出；接收专家客服输入的与咨询问题对应的专家回复信息，专家回复信息包括专家文本信息和/或专家语音信息；将专家反馈信息输出至客户端，以由客户端输出虚拟形象信息，专家反馈信息包括专家回复信息、虚拟语音信息或虚拟形象信息，虚拟语音信息通过将专家回复信息转换为与虚拟专家形象相对应的语音信息生成，虚拟形象信息通过至少将虚拟语音信息与虚拟专家形象叠加生成。可提升人效及用户体验。

技术领域

本发明涉及人机交互技术领域，具体地，涉及一种用于服务端的人机交互方法、服务端及存储介质与一种用于客户端的人机交互方法、客户端及存储介质。

背景技术

目前在金融和银行领域，有大量的专业问题咨询服务，需要专业人员参与。现有的客户服务方法主要有以下三种：

1.客户到服务网点进行线下咨询，需要专业的客服人员进行面对面的沟通解答。这种方式需要客户投入时间成本，缺少隐私保护，有时还有排队的时间投入。金融服务行业也需要投入固定人力成本，且受到地域条件限制，资源无法有效共享和调配；

2.通过拨打电话的方式，与呼叫中心的客服人员进行语音沟通。该方法虽然不用到店咨询，但只有语音交互，缺少人和人当面沟通的自然感，表达方式也比较受限；

3.在终端网页或者手机端，通过在线客服入口和后台客服人员进行交流。该方法减少了用户投入的时间成本，但依然存在由于沟通方式简单、缺少可视化等因素导致的信息交流效率低、潜在投入成本高的问题。

发明内容

为了至少部分地解决现有技术中存在的问题，提供一种用于服务端的人机交互方法、服务端及存储介质与一种用于客户端的人机交互方法、客户端及存储介质。

根据本发明一个方面，提供一种用于服务端的人机交互方法，包括：接收客户端发送的与当前用户的咨询问题相关的咨询信息，咨询信息包括用户文本信息和/或用户语音信息；将咨询信息以文本形式输出，以供专家客服查看；接收专家客服输入的与咨询问题对应的专家回复信息，专家回复信息包括专家文本信息和/或专家语音信息；将专家反馈信息输出至客户端，以由客户端输出虚拟形象信息，其中，专家反馈信息包括专家回复信息、基于专家回复信息生成的虚拟语音信息或基于虚拟语音信息生成的虚拟形象信息，其中，虚拟语音信息通过将专家回复信息转换为与虚拟专家形象相对应的语音信息生成，虚拟形象信息通过至少将虚拟语音信息与虚拟专家形象叠加生成。

示例性地，专家回复信息包括专家文本信息，专家反馈信息包括虚拟语音信息或虚拟形象信息，在将专家反馈信息输出至客户端，以由客户端输出虚拟形象信息之前，人机交互方法还包括：对专家文本信息进行语音合成，以获得虚拟语音信息。

示例性地，专家回复信息包括专家语音信息，专家反馈信息包括虚拟语音信息或虚拟形象信息，在将专家反馈信息输出至客户端，以由客户端输出虚拟形象信息之前，人机交互方法还包括：对专家语音信息进行音色转换，以转换为虚拟语音信息。

示例性地，专家回复信息包括专家语音信息，专家反馈信息包括虚拟语音信息或虚拟形象信息，在将专家反馈信息输出至客户端，以由客户端输出虚拟形象信息之前，人机交互方法还包括：对专家语音信息进行语音识别，以获得对应的识别文字信息；以及对识别文字信息进行语音合成，以获得虚拟语音信息。