[发明专利]信息处理装置、提案装置、信息处理方法和提案方法在审
申请号: | 202080073733.1 | 申请日: | 2020-10-12 |
公开(公告)号: | CN114586068A | 公开(公告)日: | 2022-06-03 |
发明(设计)人: | 岛川真人 | 申请(专利权)人: | 索尼集团公司 |
主分类号: | G06T13/20 | 分类号: | G06T13/20;G06T15/20;G06T19/00;H04N21/8549 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 陈炜;杨丽琴 |
地址: | 日本*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 信息处理 装置 提案 方法 | ||
1.一种信息处理装置,包括:
决定单元,其被配置成基于给定声音的特征量以及分割场景中的各个连接帧之间的相似度,决定所述分割场景的连接顺序,所述分割场景通过基于通过对对象进行成像获得的多视点视频而分割自由视点视频来获得;以及
生成单元,其被配置成生成其中按照由所述决定单元决定的连接顺序连接所述分割场景的自由视点内容。
2.根据权利要求1所述的信息处理装置,
其中,所述自由视点视频是其中所述对象是表演者并且所述表演者随着录制音乐跳舞的舞蹈视频。
3.根据权利要求2所述的信息处理装置,
其中,所述声音是音乐。
4.根据权利要求2所述的信息处理装置,还包括:
确定单元,其被配置成基于各个连接帧中的所述对象的三维模型,确定所述连接帧之间的相似度。
5.根据权利要求4所述的信息处理装置,
其中,所述确定单元基于分别指示所述表演者的关节位置的骨骼模型来确定所述相似度。
6.根据权利要求4所述的信息处理装置,
其中,所述确定单元基于与所述表演者的表面形状对应的点云数据来确定所述相似度。
7.根据权利要求4所述的信息处理装置,
其中,所述决定单元设置通过从所述声音的开始到结束连接所述分割场景而形成的多个连接路径,并且根据所述分割场景之间的相似度、基于连接评分的累积值来决定所述连接顺序,所述累积值是针对所述连接路径中的每一个来计算的。
8.根据权利要求4所述的信息处理装置,
其中,所述确定单元在所述决定单元决定所述连接顺序时,针对所述分割场景之间的连接,除了确定所述连接帧之间的相似度之外,还确定所述连接帧的相邻帧之间的相似度,并且
所述生成单元通过连接所述相邻帧中的具有最高相似度的帧来连接所述分割场景。
9.根据权利要求1所述的信息处理装置,
其中,所述生成单元在所述声音的休止符区间中连接所述分割场景。
10.根据权利要求3所述的信息处理装置,还包括:
计算单元,其被配置成基于所述音乐的特征量以及所述分割场景中的录制音乐的特征量来计算指示所述音乐与所述录制音乐之间的符合度的音乐评分,
其中,所述决定单元基于所述音乐评分来决定所述连接顺序。
11.根据权利要求10所述的信息处理装置,
其中,所述计算单元基于通过分割所述音乐获得的每个部分的曲调以及所述分割场景中的每一个分割场景的曲调来计算所述音乐评分。
12.根据权利要求10所述的信息处理装置,
其中,所述计算单元基于通过分割所述音乐获得的每个部分的时间长度以及所述分割场景中的每一个分割场景的时间长度来计算所述音乐评分。
13.根据权利要求12所述的信息处理装置,
其中,所述决定单元将所述分割场景中的、具有根据休止符区间的时间长度调整的时间长度的至少一个分割场景分配到所述音乐的休止符区间。
14.根据权利要求13所述的信息处理装置,
其中,所述决定单元通过稀疏化所述分割场景中的帧来调整所述分割场景的时间长度。
15.一种提案装置,包括:
提案数据生成单元,其被配置成:基于分割场景中的各个连接帧之间的相似度,生成与自由视点视频的附加成像时的姿势相关的提案数据,所述分割场景通过基于通过对对象进行成像获得的多视点视频来分割自由视点视频而获得。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于索尼集团公司,未经索尼集团公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202080073733.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:缓冲器
- 下一篇:1价CCAP生成物的制造方法