[发明专利]一种可动态调整的讲解方法、装置及电子设备有效
申请号: | 202011582434.9 | 申请日: | 2020-12-28 |
公开(公告)号: | CN112289239B | 公开(公告)日: | 2021-03-30 |
发明(设计)人: | 於其之;侯暮寒;金天磊;朱世强 | 申请(专利权)人: | 之江实验室 |
主分类号: | G09F27/00 | 分类号: | G09F27/00;G06N3/08;G06N3/04;G06K9/00;G06F40/30 |
代理公司: | 杭州求是专利事务所有限公司 33200 | 代理人: | 应孔月 |
地址: | 310023 浙江省杭州市余*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 动态 调整 讲解 方法 装置 电子设备 | ||
本发明公开了一种可动态调整的讲解方法、装置及电子设备,包括:将讲解词转换成讲解文本图;获取观众的视频和音频,识别观众的行为和参与度;依据观众的行为动态控制讲解文本图的执行过程;依据观众的参与度动态调整讲解文本图的执行路径。本发明提升了使用电子设备进行自动讲解时的灵活性,实现依据讲解过程中观众的行为和参与度对讲解过程和内容进行动态的调整。
技术领域
本发明涉及计算机领域,尤其涉及一种可动态调整的讲解方法、装置及电子设备。
背景技术
展厅、博物馆、纪念馆等场所往往有讲解员为观众提讲解服务,帮助观众更好的了解展出内容。使用服务机器人或者屏幕显示的虚拟人等自动讲解设备代替讲解员的工作,可以节省大量人力成本,而且自动讲解设备不会因为疲倦或者疏忽而出现讲解内容的差错。但是与人类讲解员相比,现有的自动讲解设备灵活性不足。譬如,人类讲解员在讲解过程中能根据观众的参与度适当延长或者压缩讲解内容,而现在的自动讲解设备一般只能播放固定长度的讲解词。再如,人类讲解员能暂停讲解以回答观众提问,而且处理完问题后能够通顺的恢复讲解,虽然现在有一部分自动讲解设备能支持讲解被打断,但在恢复讲解时没有考虑前后讲解词内容是否能通顺衔接。上述问题导致观众的参观体验较差,影响自动讲解设备的应用普及。
发明内容
本发明的目的在于针对现有技术的不足,提出一种可动态调整的讲解方法、装置及电子设备,以解决现有自动讲解设备灵活性不足的问题。
为了达到上述目的,本发明实施例所采用的技术方案来如下:
第一方面,本发明实施例提供一种可动态调整的讲解方法,包括:
将讲解词转换成讲解文本图,其中所述讲解词具有一个或多个版本,不同版本所需讲解时间不同,所述讲解文本图为有向图,所述有向图的节点包含某一个版本的讲解词片段,所述有向图的有向边表示所连接的两个节点所包含的两个讲解词片段在讲解过程中能按照所述有向边的方向通顺衔接,所述两个讲解词片段属于同一个版本或分属于不同版本;
获取观众的视频和音频,识别观众的行为和参与度;
依据所述观众的行为动态控制所述讲解文本图的执行过程,执行所述讲解文本图指沿着所述有向图的起始节点到结束节点的一条路径依次访问节点,所述访问节点指讲解所述节点包含的讲解词片段;
依据所述观众的参与度动态调整所述讲解文本图的执行路径,所述执行路径指所述讲解文本图的执行过程中所访问的节点的序列。
进一步地,所述将讲解词转换成讲解文本图,包括:
对于只具有一个版本的讲解词,在讲解词中找到分隔点序列;分隔点的位置根据讲解被打断后恢复讲解时的合理起始位置定义,即两个前后连续的分隔点之间的文本若在讲解中被打断,则在恢复讲解时必须从所述两个连续的分隔点中的第一个分隔点开始讲解所述两个前后连续的分隔点之间的文本;每两个连续的所述分隔点之间的文本为一个讲解词片段;
以所述讲解词片段为节点构建有向图,称为讲解文本图,所述讲解文本图中每个节点包含一个所述讲解词片段;
若两个所述讲解词片段在所述讲解词中为前后顺序关系,则将所述讲解文本图中相应的两个节点用有向边连接,所述有向边称为顺序边,所述有向边的方向表示讲解的先后顺序;
将包含所述讲解词中第一个片段的节点作为所述讲解文本图的起始节点,将包含所述讲解词中最后一个片段的节点作为所述讲解文本图的结束节点。
进一步地,所述将讲解词转换成讲解文本图,包括:
对于具有多个版本的讲解词,选定一个版本作为默认版本,对每一个版本都独立构建所述讲解文本图,得到对应不同版本的多个所述讲解文本图;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于之江实验室,未经之江实验室许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011582434.9/2.html,转载请声明来源钻瓜专利网。
- 上一篇:文本指标数据解析方法、系统及相应设备和存储介质
- 下一篇:防溺水智能手表