[发明专利]基于三维模型的交互方法、装置、系统、电子设备和存储介质有效
申请号: | 202010698810.4 | 申请日: | 2020-07-20 |
公开(公告)号: | CN111885398B | 公开(公告)日: | 2021-12-07 |
发明(设计)人: | 郑深圳;白杰;张蕾 | 申请(专利权)人: | 贝壳找房(北京)科技有限公司 |
主分类号: | H04N21/239 | 分类号: | H04N21/239;H04N21/422;H04N21/439;H04N21/485;H04N21/658;G06T17/00 |
代理公司: | 北京思源智汇知识产权代理有限公司 11657 | 代理人: | 毛丽琴 |
地址: | 100085 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 三维 模型 交互 方法 装置 系统 电子设备 存储 介质 | ||
1.一种基于三维模型的交互方法,应用于第一用户终端,其特征在于,所述第一用户终端呈现有用户页面,所述方法包括:
响应于检测到用户针对所述用户页面的目标交互操作,向为所述用户页面提供页面数据的服务器发送针对所述目标交互操作的交互请求,其中,所述用户页面用于呈现三维模型,所述三维模型与第二用户终端登录的用户账号预先建立关联关系;
接收所述服务器从所述第二用户终端获取的流媒体视频;
在所述用户界面上呈现所述流媒体视频和所述三维模型。
2.根据权利要求1所述的方法,其特征在于,所述接收所述服务器从所述第二用户终端获取的流媒体视频,包括:
响应于所述服务器接收到所述第二用户终端针对所述交互请求发送的交互确认信息,接收所述服务器从所述第二用户终端获取的流媒体视频。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
响应于所述第一用户终端的当前网速值小于或等于预设网速阈值,基于所述流媒体视频中的各帧语音,对目标用户图像进行调整,生成新视频,其中,所述新视频表征所述目标用户图像指示的用户执行所述各帧语音指示的动作;
采用所述新视频替代所述流媒体视频进行呈现。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
基于所述流媒体视频中的图像,生成目标用户图像;或者
将与所述用户账号相关联的用户图像确定为目标用户图像。
5.根据权利要求3所述的方法,其特征在于,所述方法还包括:
响应于所述用户页面呈现有所述新视频,向所述服务器发送摄像头关闭确认信息,其中,所述摄像头关闭确认信息用于确定所述第二用户终端是否关闭摄像头。
6.根据权利要求1-5之一所述的方法,其特征在于,所述接收所述服务器从所述第二用户终端获取的流媒体视频,包括:
将所述第一用户终端的当前网速值发送至所述服务器;
接收所述服务器发送的分辨率与所述当前网速值相匹配的、所述第二用户终端获取的流媒体视频。
7.根据权利要求1-5之一所述的方法,其特征在于,所述方法还包括:
接收所述服务器发送的模型调整信息,其中,所述模型调整信息指示使用所述第二用户终端的用户对呈现于所述第二用户终端的所述三维模型的调整操作,所述调整操作包括以下至少一项:缩放、旋转、移动、视点切换;
按照所述模型调整信息指示的调整操作,对所述用户界面上呈现的所述三维模型进行相同调整操作。
8.根据权利要求1-5之一所述的方法,其特征在于,所述三维模型包括多个子空间场景的三维子模型,所述多个子空间场景中的子空间场景与预先确定的关键词集合中的关键词相对应;以及
所述方法还包括:
对所述流媒体视频中的语音进行语音识别,得到语音识别结果;
响应于确定所述语音识别结果包含所述关键词集合中的关键词,在所述用户界面上呈现与所述语音识别结果包含的关键词相对应的子空间场景的三维子模型。
9.根据权利要求1-5之一所述的方法,其特征在于,所述方法还包括:
获取用户针对所述流媒体视频的反馈信息;
将所述反馈信息发送至所述服务器,其中,所述服务器用于将所述反馈信息与所述用户账号建立关联关系。
10.一种基于三维模型的交互方法,应用于第二用户终端,其特征在于,所述第二用户终端登录的用户账号与三维模型预先建立关联关系,所述方法包括:
响应于接收到服务器发送的交互请求,获取流媒体视频,其中,所述交互请求指示第一用户终端检测到用户针对所述第一用户终端呈现的用户页面的目标交互操作,所述用户页面用于呈现所述三维模型;
向所述服务器发送所述流媒体视频,其中,所述服务器用于将所述流媒体视频发送至所述第一用户终端,以使所述第一用户终端在所述用户界面上呈现所述流媒体视频和所述三维模型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于贝壳找房(北京)科技有限公司,未经贝壳找房(北京)科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010698810.4/1.html,转载请声明来源钻瓜专利网。