[发明专利]视频语义表示方法、装置、电子设备和存储介质在审
| 申请号： | 202111637372.1 | 申请日： | 2021-12-30 |
| 公开（公告）号： | CN113987274A | 公开（公告）日： | 2022-01-28 |
| 发明（设计）人： | 张恒庆;孟凡飞;李飞阳;薛娇 | 申请（专利权）人： | 智者四海（北京）技术有限公司 |
| 主分类号： | G06F16/783 | 分类号： | G06F16/783;G06F40/30;G06V20/40;G06V10/80;G06V10/774;G06V10/82;G06K9/62;G06N3/04;G06N3/08 |
| 代理公司： | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人： | 何明伦 |
| 地址： | 100000 北京市海淀区*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明提供一种视频语义表示方法、装置、电子设备和存储介质，其中方法包括：获取待表示视频的视频文本信息和多个视频帧；分别利用视频语义表示模型的文本编码器和图片编码器对视频文本信息和多个视频帧进行语义提取，得到视频文本信息的语义向量和多个视频帧的帧语义向量；利用视频语义表示模型的多模态融合器，对文本语义向量和多个视频帧的帧语义向量进行多模态融合，得到待表示视频的视频语义表示；其中，视频语义表示模型是基于样本视频的样本文本信息和多个样本视频帧进行自监督学习得到的，视频语义表示模型的图片编码器和文本编码器是基于样本图片以及样本图片的描述文本预先进行联合训练得到的。本发明提高了视频语义表示的精确性。 | ||
| 搜索关键词： | 视频 语义 表示 方法 装置 电子设备 存储 介质 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于智者四海（北京）技术有限公司，未经智者四海（北京）技术有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202111637372.1/，转载请声明来源钻瓜专利网。
