[发明专利]自动识别和显示图形小说中的感兴趣对象有效
申请号: | 201680085828.9 | 申请日: | 2016-12-21 |
公开(公告)号: | CN109155076B | 公开(公告)日: | 2023-07-14 |
发明(设计)人: | 格雷格·哈特雷尔;加思·康博伊;布拉迪·杜加;辜新星;阿德琳·比瓦尔斯;德巴基特·高什;约翰·里夫林;艾伦·纽伯格;安泰完;雅各布·穆恩;克里斯托弗·萨尔瓦拉尼;卡尔·布拉斯 | 申请(专利权)人: | 谷歌有限责任公司 |
主分类号: | G06T11/60 | 分类号: | G06T11/60 |
代理公司: | 中原信达知识产权代理有限责任公司 11219 | 代理人: | 周亚荣;安翔 |
地址: | 美国加利*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 自动识别 显示 图形 小说 中的 感兴趣 对象 | ||
1.一种向阅读设备提供数字图形小说内容的计算机实现的方法,所述方法包括:
接收数字图形小说内容,所述数字图形小说内容包括传达所述图形小说的叙述的一系列面板;
通过将模型应用于所述数字图形小说内容来识别所述数字图形小说内容的多个感兴趣区域的位置;
基于所述多个感兴趣区域的所识别的位置识别所述数字图形小说内容中的多个感兴趣对象的位置,其中,所述多个对象包括所述数字图形小说内容中的对话泡泡对象,所述对话泡泡对象包含与所述数字图形小说内容中的人物相关联的文本;
对于每个感兴趣对象:
i)识别该感兴趣对象的区别特征的坐标,
ii)使用所述区别特征的所述坐标设置与该感兴趣对象相关联的参考点;
iii)基于所述参考点和所述面板的位置之间的空间关系来确定包含该感兴趣对象的面板;以及
iv)基于所述参考点与包含在所述面板内的其他感兴趣对象的参考点之间的空间关系来确定所述面板内的该感兴趣对象的呈现顺序;
为所述数字图形小说内容创建呈现元数据,所述呈现元数据指示所述多个感兴趣对象的所识别的位置和呈现顺序;以及
将所述数字图形小说内容和所述呈现元数据提供给所述阅读设备,用于根据所述呈现元数据呈现所述多个感兴趣对象的扩展版本。
2.根据权利要求1所述的计算机实现的方法,其中所述模型是机器学习模型,并且还包括构建所述机器学习模型,所述构建包括:
选择图像集;
标记所述图像集中的感兴趣区域以生成标记图像的训练数据;以及
基于所述训练数据的标记图像构建所述机器学习模型,所述机器学习模型能够接收所述数字图形小说内容并且在所述数字图形小说内容中生成所述多个感兴趣区域的所述位置。
3.根据权利要求1所述的计算机实现的方法,其中所述多个感兴趣区域包括包含所述对话泡泡对象的所述文本的所述数字图形小说内容中的所述对话泡泡对象的文本区域。
4.根据权利要求1所述的计算机实现的方法,其中所述感兴趣对象是所述数字图形小说内容中的对话泡泡对象,并且所述区别特征是所述对话泡泡对象的锚定点。
5.根据权利要求2所述的计算机实现的方法,还包括:
获得关于所述数字图形小说内容的呈现的反馈数据;以及
基于所获得的反馈数据更新所述机器学习模型以改进与所述数字图形小说内容相关联的呈现元数据。
6.根据权利要求5所述的计算机实现的方法,其中所述反馈数据包括已经在所述阅读设备上放大的所述数字图形小说内容的部分。
7.一种存储用于向阅读设备提供数字图形小说内容的可执行计算机程序指令的非暂时性计算机可读存储介质,所述计算机程序指令包括:
接收数字图形小说内容,所述数字图形小说内容包括传达所述图形小说的叙述的一系列面板;
通过将模型应用于所述数字图形小说内容来识别所述数字图形小说内容的多个感兴趣区域的位置;
基于所述多个感兴趣区域的所识别的位置识别所述数字图形小说内容中的多个感兴趣对象的位置,其中,所述多个对象包括所述数字图形小说内容中的对话泡泡对象,所述对话泡泡对象包含与所述数字图形小说内容中的人物相关联的文本;
对于每个感兴趣对象:
i)识别该感兴趣对象的区别特征的坐标,
ii)使用所述区别特征的所述坐标设置与该感兴趣对象相关联的参考点;
iii)基于所述参考点和所述面板的位置之间的空间关系来确定包含该感兴趣对象的面板;以及
iv)基于所述参考点与包含在所述面板内的其他感兴趣对象的参考点之间的空间关系来确定所述面板内的该感兴趣对象的呈现顺序;为所述数字图形小说内容创建呈现元数据,所述呈现元数据指示所述多个感兴趣对象的所识别的位置和呈现顺序;以及
将所述数字图形小说内容和所述呈现元数据提供给所述阅读设备,用于根据所述呈现元数据呈现所述多个感兴趣对象的扩展版本。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于谷歌有限责任公司,未经谷歌有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201680085828.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:适配3D打印文件
- 下一篇:渐进渲染的体积光线追踪