[发明专利]用于基于医学报告中的文本数据来生成医学图像的方法和系统

权利要求书

1.一种用于基于患者的医学报告中的文本数据来生成医学图像的方法，包括：

由图像生成系统(101)从患者的一个或多个医学报告(207)中的每个医学报告中检索文本数据(208)，其中，所述文本数据(208)包括一个或多个医学事件和对应的一个或多个属性，所述对应的一个或多个属性与所述一个或多个医学报告(207)中的每个医学报告相关联；

由所述图像生成系统(101)使用第一机器学习模型基于所述文本数据(208)来计算针对多幅参考图像(210)中的每幅参考图像的匹配分数(209)；

由所述图像生成系统(101)基于与所述多幅参考图像(210)中的每幅参考图像相关联的所述匹配分数(209)从所述多幅参考图像(210)中选择一幅或多幅图像；并且

由所述图像生成系统(101)使用第二机器学习模型基于所述一幅或多幅图像和所述文本数据(208)来生成针对所述患者的医学图像(218)。

2.根据权利要求1所述的方法，其中，所述文本数据(208)中的所述一个或多个医学事件和所述对应的一个或多个属性是按时间顺序排列的。

3.根据权利要求1所述的方法，其中，与所述文本数据(208)中的所述一个或多个医学事件中的每个医学事件相对应的所述一个或多个属性包括与对应的医学事件相关联的日期属性、时间属性、模态属性、定性属性以及定量属性。

4.根据权利要求1所述的方法，其中，计算所述匹配分数(209)包括：

由所述图像生成系统(101)生成针对所述多幅参考图像(210)中的每幅参考图像的矢量表示(211)；

由所述图像生成系统(101)基于对应的矢量表示(211)和所述文本数据(208)来生成针对所述多幅参考图像(210)中的每幅参考图像的联合矢量表示(212)；并且

由所述图像生成系统(101)基于相应的参考图像(210)的所述联合矢量表示(212)来计算针对所述多幅参考图像(210)中的每幅参考图像的所述匹配分数(209)。

5.根据权利要求1所述的方法，其中，从所述多幅参考图像(210)中选择的所述一幅或多幅图像中的每幅图像与大于预定义匹配分数的所述匹配分数(209)相关联。

6.根据权利要求1所述的方法，其中，生成所述医学图像(218)包括：

由所述图像生成系统(101)检索第一序列(213)，所述第一序列包括所述文本数据(208)中的单词和短语中的一项的矢量表示(211)；

由所述图像生成系统(101)生成第二序列(214)，所述第二序列包括所述一幅或多幅图像；

由所述图像生成系统(101)基于所述第一序列(213)和所述第二序列(214)来生成针对所述文本数据(208)的所述一个或多个医学事件中的每个医学事件的医学事件图像(215)；并且

由所述图像生成系统(101)以预定义样式拼接所述一个或多个医学事件中的每个医学事件的所述医学事件图像(215)，以用于生成所述医学图像(218)。

7.根据权利要求6所述的方法，其中，检索所述第一序列(213)包括：

由所述图像生成系统(101)确定与所述文本数据(208)中的所述单词和所述短语中的一项相关联的后向隐藏状态(216)和前向隐藏状态(217)；并且

由所述图像生成系统(101)将所述后向隐藏状态(216)和所述前向隐藏状态(217)进行级联，以用于检索所述第一序列(213)。

8.根据权利要求7所述的方法，其中，所述后向隐藏状态(216)和所述前向隐藏状态(217)是分别使用后向长短期记忆(LSTM)单元和前向LSTM单元来确定的。

9.根据权利要求1所述的方法，其中，所述第二机器学习模型是基于所述多幅参考图像(210)和预定义文本数据来训练的。