[发明专利]一种提升训练数据生成速度的方法和设备

权利要求书

1.一种提升训练数据生成速度的方法,其特征在于，包括：

确定待训练的文本的字数以及每个训练数据的矩阵的维度；所述维度包括横向维度与纵向维度；

基于所述横向维度的值与所述纵向维度的值确定批处理数据的大小；

通过所述字数与所述批处理数据的大小确定所述批处理数据的数量；

根据所述批处理数据的数量确定所述训练数据的数量；

根据所述字数与所述横向值确定采样数据的大小；

遍历每个所述训练数据，依次在每个所述矩阵的第Y个所述横向维度导入预设个字的所述文本；在第Y个所述横向维度导入的所述文本的总大小等于所述采样数据的大小；不同的所述矩阵中导入的所述文本不同；

更改Y的值后执行“依次在每个所述矩阵的第Y个所述横向维度导入预设数量个字的所述文本”的操作，直到每个所述矩阵的所有的所述横向维度均有文本导入，以生成所述训练数据。

2.如权利要求1所述的方法，其特征在于，所述训练数据的大小与所述批处理数据的大小相同；

所述批处理数据的大小是通过所述横向维度的值与所述纵向维度的值相乘得到的。

3.如权利要求1或2所述的方法，其特征在于，所述训练数据的数量与所述批处理数据的数量相同。

4.如权利要求1所述的方法，其特征在于，所述采样数据是基于保证相邻的两个所述训练数据存在关联信息，通过一定数据大小的间隔采样得到的；

所述采样数据的大小是通过所述字数除以所述横向值得到的。

5.如权利要求1所述的方法，其特征在于，所述预设数量为所述纵向维度的值；

该方法还包括：

若在第Y个所述横向维度导入的所述文本的总大小大于所述采样数据的大小，则缩小最后导入的所述矩阵的第Y个所述横向维度的所述文本，以使在第Y个所述横向维度导入的所述文本的总大小等于所述采样数据的大小。

6.一种提升训练数据生成速度的设备,其特征在于，包括：

确定模块，用于确定待训练的文本的字数以及每个训练数据的矩阵的维度；所述维度包括横向维度与纵向维度；

大小模块，用于基于所述横向维度的值与所述纵向维度的值确定批处理数据的大小；

第一数量模块，用于通过所述字数与所述批处理数据的大小确定所述批处理数据的数量；

第二数量模块，，用于根据所述批处理数据的数量确定所述训练数据的数量；

采样大小模块，用于根据所述字数与所述横向值确定采样数据的大小；

导入模块，用于遍历每个所述训练数据，依次在每个所述矩阵的第Y个所述横向维度导入预设个字的所述文本；在第Y个所述横向维度导入的所述文本的总大小等于所述采样数据的大小；不同的所述矩阵中导入的所述文本不同；

生成模块，用于更改Y的值后执行“依次在每个所述矩阵的第Y个所述横向维度导入预设数量个字的所述文本”的操作，直到每个所述矩阵的所有的所述横向维度均有文本导入，以生成所述训练数据。

7.如权利要求6所述的设备，其特征在于，所述训练数据的大小与所述批处理数据的大小相同；

所述批处理数据的大小是通过所述横向维度的值与所述纵向维度的值相乘得到的。

8.如权利要求6或7所述的设备，其特征在于，所述训练数据的数量与所述批处理数据的数量相同。

9.如权利要求6所述的设备，其特征在于，所述采样数据是基于保证相邻的两个所述训练数据存在关联信息，通过一定数据大小的间隔采样得到的；

所述采样数据的大小是通过所述字数除以所述横向值得到的。

10.如权利要求6所述的设备，其特征在于，所述预设数量为所述纵向维度的值；

该方法还包括：缩小模块，用于：若在第Y个所述横向维度导入的所述文本的总大小大于所述采样数据的大小，则缩小最后导入的所述矩阵的第Y个所述横向维度的所述文本，以使在第Y个所述横向维度导入的所述文本的总大小等于所述采样数据的大小。