[发明专利]一种输入的方法及相关装置

权利要求书

1.一种输入的方法，其特征在于，包括：

获取多模态输入信息，所述多模态输入信息包括用户输入信息和辅助输入信息；

基于所述用户输入信息、所述辅助输入信息和对应的特征提取器，获得用户输入特征和辅助输入特征；

基于所述用户输入特征、所述辅助输入特征和特征交互网络，获得所述用户输入信息对应的目标输入内容。

2.根据权利要求1所述的方法，其特征在于，所述用户输入信息包括键盘输入信息、手写输入信息或语音输入信息；当所述用户输入信息包括键盘输入信息时，所述用户输入特征包括键盘输入特征；当所述用户输入信息包括手写输入信息时，所述用户输入特征包括手写特征；当所述用户输入信息包括语音输入信息时，所述用户输入特征包括语音特征。

3.根据权利要求1所述的方法，其特征在于，所述辅助输入信息包括传感器输入信息和/或视觉输入信息；当所述辅助输入信息包括传感器输入信息时，所述辅助输入特征包括传感器特征；当所述辅助输入信息包括视觉输入信息时，所述辅助输入特征包括视觉特征；当所述辅助输入信息包括传感器输入信息和视觉输入信息时，所述辅助输入特征包括传感器特征和视觉特征。

4.根据权利要求1所述的方法，其特征在于，所述特征提取器包括可训练特征提取器、不可训练特征提取器或混合特征提取器；其中，所述可训练特征提取器是基于输入信息样本训练浅层网络或者深层网络获得的。

5.根据权利要求1所述的方法，其特征在于，所述特征交互网络是基于多模态输入特征样本训练浅层网络或者深层网络获得的。

6.根据权利要求1所述的方法，其特征在于，还包括：

获得用户个性化特征；

对应地，所述基于所述用户输入特征、所述辅助输入特征和特征交互网络，获得所述用户输入信息对应的目标输入内容，具体为：

基于所述用户个性化特征、所述用户输入特征、所述辅助输入特征和特征交互网络，获得所述用户输入信息对应的目标输入内容。

7.根据权利要求6所述的方法，其特征在于，所述用户个性化特征包括用户个性化生理特征和/或用户个性化行为特征。

8.一种输入的装置，其特征在于，包括：

多模态输入信息获取单元，用于获取多模态输入信息，所述多模态输入信息包括用户输入信息和辅助输入信息；

输入特征获得单元，用于基于所述用户输入信息、所述辅助输入信息和对应的特征提取器，获得用户输入特征和辅助输入特征；

目标输入内容获得单元，用于基于所述用户输入特征、所述辅助输入特征和特征交互网络，获得所述用户输入信息对应的目标输入内容。

9.一种用于输入的装置，其特征在于，包括有存储器，以及一个或者一个以上的程序，其中一个或者一个以上程序存储于存储器中，且经配置以由一个或者一个以上处理器执行所述一个或者一个以上程序包含用于进行以下操作的指令：

获取多模态输入信息，所述多模态输入信息包括用户输入信息和辅助输入信息；

基于所述用户输入信息、所述辅助输入信息和对应的特征提取器，获得用户输入特征和辅助输入特征；

基于所述用户输入特征、所述辅助输入特征和特征交互网络，获得所述用户输入信息对应的目标输入内容。

10.一种机器可读介质，其上存储有指令，当由一个或多个处理器执行时，使得装置执行如权利要求1至7中任一项所述的输入的方法。