[发明专利]跨媒体分析推理技术系统

权利要求书

1.跨媒体分析推理技术系统，包括服务器、输入模块、输出模块和存储模块，其特征在于：所述服务器用于跨媒体分析推理，所述输入模块用于跨媒体信息输入，所述输出模块用于跨媒体内容演化输出，所述存储模块用于跨媒体医疗数据库以及方法和模型的存储；

所述输入模块通过服务器连接输出模块，所述输入模块通过服务器连接存储模块，所述存储模块通过服务器连接输出模块；

所述服务器包括计算单元，所述存储模块内有所述计算单元用于运行的大规模跨媒体医疗知识随机森林模型和跨媒体知识自演化模型。

2.根据权利要求1所述的跨媒体分析推理技术系统，其特征在于：所述跨媒体多元医疗数据库包括文本模块、图片模块、视频模块和音频模块。

3.根据权利要求2所述的跨媒体分析推理技术系统，其特征在于：所述文本模块包括医学教材单元、临床指南单元、药典单元及三甲医院优质电子病历单元，所述图片模块包括医学检测图像单元、医学影像单元，眼底造影图像单元，所述视频模块包括医学教材视频单元、权威医学诊断视频单元，所述音频模块包括权威专家诊断语音单元、医学解释语音单元。

4.根据权利要求1所述的跨媒体分析推理技术系统，其特征在于：所述大规模跨媒体医疗知识随机森林模型用于对跨媒体医疗数据库进行推理与演化，所述跨媒体知识自演化模型用于对输入模块输入的数据进行计算推理和分析。

5.根据权利要求1所述的跨媒体分析推理技术系统，其特征在于：所述跨媒体多元医疗数据库还包括临床辅助决策、医疗大数据解决方案、眼底影像分析和诊前导航四大模块。

6.根据权利要求1所述的跨媒体分析推理技术系统，其特征在于：还包括运营维护模块，所述运营维护模块包括操作系统维护单元、硬件维护单元、运维事件特征库、作业调度系统和业务运行数据单元。

7.根据权利要求1所述的跨媒体分析推理技术系统，其特征在于：所述大规模跨媒体医疗知识随机森林模型包括Word2vect、CNN、RNN、LASM和MFCC中的一种或几种。

8.根据权利要求1所述的跨媒体分析推理技术系统，其特征在于：所述输入模块包括摄像单元、录音单元、触屏单元和键盘单元。

9.根据权利要求1所述的跨媒体分析推理技术系统，其特征在于：所述输出模块包括显示单元、语音播放单元。

10.根据权利要求1-9任一项所述的跨媒体分析推理技术系统的使用方法，其特征在于：包括以下步骤：

(a)构建跨媒体医疗数据库自动采集系统，通过跨媒体医疗数据库自动采集系统生成不断演化更新的跨媒体医疗数据库；

(b)采用Word2vect、CNN、RNN、LASM和MFCC中的一种或几种建立跨媒体知识自演化模型，对文本、图像、视频和音频进行分析提取；

(c)针对海量异构分布的大规模跨医疗媒体知识，构建大规模跨媒体医疗知识随机森林模型，利用大规模跨媒体医疗知识随机森林模型对跨媒体医疗数据库进行适应内容演化以及分析推理；

(d)建立从定向推理到通用推理的泛化机制，通过将图文音视结合交融的方式输出内容。