[发明专利]用于信息取回系统的多模态表格编码

摘要

多模态表格编码，包括：接收包含表格的电子文档。表格包括多个行、多个列、以及包括列标签或行标签的模式。电子文档包括位于表格外部的表格的描述。接下来，操作单独的机器学习编码器以分别单独地对表格的描述、模式、行中的每一行、以及列中的每一列进行编码。模式、行、以及列与分别标记每一列和每一行的末端的列末端令牌和行末端令牌一起被编码。然后，将机器学习门控机制应用于经编码的描述、经编码的模式、经编码的行、以及经编码的列，以产生表格的融合编码，其中融合编码表示表格的结构和表格的内容两者。