[发明专利]一种扫描笔的录音翻译系统及方法在审
申请号: | 202110264608.5 | 申请日: | 2021-03-11 |
公开(公告)号: | CN112989847A | 公开(公告)日: | 2021-06-18 |
发明(设计)人: | 陈家峰;秦曙光 | 申请(专利权)人: | 读书郎教育科技有限公司 |
主分类号: | G06F40/58 | 分类号: | G06F40/58;G06F16/432;G06F16/438;G06K9/22;G10L15/26;G10L17/02 |
代理公司: | 广州德伟专利代理事务所(普通合伙) 44436 | 代理人: | 黄浩威;何文颖 |
地址: | 528400 广*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 扫描 录音 翻译 系统 方法 | ||
1.一种扫描笔的录音翻译系统,其特征在于,包括:
翻译功能触发模块:用于触发翻译事件;
声纹设置触发模块:用于触发声纹设置事件;
声音采集模块:用于在触发声纹设置事件后获取用户的声音并传输至声纹存储与识别模块,以及用于在触发翻译事件后获取交流的声音数据并传输至声纹存储与识别模块;
用户照片摄像模块:用于在声纹设置时拍摄得到用户照片并传输至声纹存储与识别模块;
声纹存储与识别模块:用于在声纹设置时对用户的声音进行声纹提取,以及将提取的声纹信息和用户照片进行映射并存储;用于在翻译时提取获取的声音数据中所有的声纹信息,并在预先存储的声纹信息中检索出相应的声纹信息和其所映射的用户照片,以及对声音数据按声纹信息进行切分,并将切分得到的声音片段按发生的时间从先到后排序,然后将每段声音片段连同其对应的用户照片发送至翻译模块;
翻译模块:用于将切分得到的每段声音片段翻译成文本,并将每段声音片段的翻译文本和对应的用户照片融合在一起,最后输出在扫描笔的显示屏上。
2.一种利用权利要求1所述系统的方法,其特征在于,具体过程如下:
S1、通过声纹设置触发模块触发声纹设置,通过声音采集模块参与交流的用户的声音,声纹存储与识别模块对用户的声音进行声纹识别,提取声纹信息;然后利用摄像模块获取用户照片,声纹存储与识别模块将提取的声纹信息和用户照片进行映射并存储;通过上述过程,依次建立各个参与交流的用户的声纹信息与用户照片的映射关系;
S2、通过翻译功能触发模块触发翻译事件,然后声音采集模块获取交流的声音数据;
S3、声纹存储与识别模块提取该声音数据中所有的声纹信息,并在预先存储的声纹信息中检索出相应的声纹信息和其所映射的用户照片;
S4、声纹存储与识别模块对声音数据按声纹信息进行切分,并将切分得到的声音片段按发生的时间从先到后排序,然后将每段声音片段连同其对应的用户照片发送至翻译模块;
S5、翻译模块将切分得到的每段声音片段翻译成文本,并将每段声音片段的翻译文本和对应的用户照片融合在一起,最后输出在扫描笔的显示屏上。
3.根据权利要求2所述的方法,其特征在于,步骤S5中,将每段声音片段的翻译文本和对应的用户照片融合在一起的过程为:每段声音片段的翻译文本作为一个独立的段落,每个段落按发生的时间从先到后排序,对应的用户照片放在对应段落的首端。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于读书郎教育科技有限公司,未经读书郎教育科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110264608.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种单级单相非对称全桥逆变器
- 下一篇:一种课本扫读及查询匹配的方法