[发明专利]一种交互式富媒体可视化渲染方法及系统

权利要求书

1.一种交互式富媒体可视化渲染方法，其特征在于，包括：

S1.将包含图形、图像和视频的异构富媒体场景对象进行存储；

S2.读取所述异构富媒体场景对象，对所述异构富媒体场景对象进行融合，得到多源异构富媒体场景；

S3.对所述多源异构富媒体场景进行可视化渲染；

其中，对所述异构富媒体场景对象进行融合，得到多源异构富媒体场景包括：

(1)输入富媒体场景对象U₁[i],U₂[j],U₃[l]与富媒体场景Scene，i＝0,1,2,…,n-1；j＝0,1,2,…,m-1；l＝0,1,2,…,p-1，其中，U₁[i]为图形对象、U₂[j]为图像对象、U₃[l]为视频对象，i,j,l分别为富媒体场景中图形、图像、视频的个数；

(2)分别抽取图形对象、图像对象和视频对象中的几何形状、离散像素、视频编码的特征参数

(3)计算特征参数在富媒体场景所占的权值，以当前视点到富媒体场景对象的欧氏距离为衡量标准，λ_i＝dist|E_i(x,y,z)-U_j[x,y,z]|，E_i(x,y,z)为视点在富媒体场景中世界坐标值，U_j[x,y,z]为不同元素对象在富媒体场景中的世界坐标值，则U₁[i],U₂[j],U₃[l]的权值分别为：

(4)当U₁[i],U₂[j],U₃[l]共同描述同一富媒体场景Scene时，共享子空间Sub_S为Sub_S＝f(U₁[i],U₂[j],U₃[l])；

(5)在共享子空间内，通过构建学习模型库，计算异构模态信息自适应模型与优化模型参数，动态调整优化场景对象权值，得到最优融合策略：Scene＝α₁U₁[i]+α₂U₂[j]+α₃U₃[l]；

(6)将融合后的特征向量进行特征重构；

(7)输出融合后的多源异构的富媒体场景。

2.根据权利要求1所述的方法，其特征在于，所述步骤S1包括：

构建多层存储架构，将图形、图像、视频异构富媒体场景对象及其属性在存储前进行编码压缩，动态分配独立存储空间，以并发方式分别进行读取，其中，存储内部读写操作采用互斥方式，为每个存储访问对象设定独立控制单元，当富媒体场景对象遇到交互触发条件时，将存储访问权授予存储访问优先级最高的富媒体场景对象。

3.根据权利要求2所述的方法，其特征在于，所述步骤S1还包括：

采用渐进式流传输方式，将不同类别富媒体场景对象封装在含有时间戳场景信息的传输层单元里面，所述传输层单元包含一个或多个场景交互命令；当富媒体场景更新时，首先根据传输层单元上的时间戳判断此传输层单元是否需要切换，若需要，立即解析切换，若不需要，保存传输层单元待合适交互触点再处理，为所述传输层单元维护一个缓冲区，各个传输层单元按照时间戳顺序排列，新加入的传输层单元插入合适的位置，每次取缓冲区中第一个传输层单元进行处理，以减少对单个对象的遍历次数。

4.根据权利要求1所述的方法，其特征在于，对所述多源异构富媒体场景进行可视化渲染包括：基于视点的几何分块分布式进行渲染，将富媒体场景按元素分为图形场景单元、图像场景单元、视频场景单元，每个场景单元按照位置相关进行编号存储，每种类型场景单元按照对象类别再次分割成若干子单元，子单元按照位置相关进行编号存储，存储内容包含场景单元类型、场景单元位置信息、场景单元所包含的子单元对象、子单元对象的位置信息，在帧渲染的响应逻辑中，根据场景的位置信息确定当前视点所在场景单元与子单元的编号，以及与其相邻的场景单元与子单元的编号。