[发明专利]基于特征编码的文本特征提取方法、系统、装置有效
申请号: | 201910205999.6 | 申请日: | 2019-03-19 |
公开(公告)号: | CN109977227B | 公开(公告)日: | 2021-06-22 |
发明(设计)人: | 张旭;熊彦钧;何赛克;刘春阳;郑晓龙;陈志鹏;曾大军;彭鑫 | 申请(专利权)人: | 中国科学院自动化研究所;国家计算机网络与信息安全管理中心 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F40/289;G06F40/12;G06N3/00;G06N3/12 |
代理公司: | 北京市恒有知识产权代理事务所(普通合伙) 11576 | 代理人: | 郭文浩;尹文会 |
地址: | 100190 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 特征 编码 文本 提取 方法 系统 装置 | ||
1.一种基于特征编码的文本特征提取方法,其特征在于,包括:
步骤S10,获取输入文本的词候选特征序列;
步骤S20,基于所述词候选特征序列,生成M个二进制编码,M为正整数;
步骤S30,以所述M个二进制编码作为M组基因种群,并计算所述M组基因种群中每个个体的适应度,并基于所述M组基因种群中每个个体的适应度,采用基因遗传算法,获得最优二进制编码;
步骤S40,将所述最优二进制编码解码,获得对应的最优词特征序列作为提取的文本特征并输出;
其中,计算所述M组基因种群中每个个体的适应度之后,还可以计算基因变异率:
其中,βm为群体中适应度不同分布提供动态变化的基因变异率,β为个体适应度,βmax是群体中最大的适应度,βavg是群体的平均适应度,k1、k2为常数。
2.根据权利要求1所述的基于特征编码的文本特征提取方法,其特征在于,步骤S10中“获取输入文本的词候选特征序列”,其步骤为:
步骤S11,采用文本分词算法将输入的文本划分为词,构成文本词集;
步骤S12,对所述文本词集中每一个词进行权重计算,获得文本词集对应的权重;
步骤S13,按照权重从大到小的顺序选取预设数量的词作为词候选特征序列。
3.根据权利要求1所述的基于特征编码的文本特征提取方法,其特征在于,步骤S20中“基于所述词候选特征序列,生成M个二进制编码”,其步骤为:
步骤S21,对所述词候选特征序列中的词进行随机排列,获得M个随机特征序列;
步骤S22,将所述M个随机特征序列生成M个长度与所述词候选特征序列相同的二进制编码。
4.根据权利要求1所述的基于特征编码的文本特征提取方法,其特征在于,步骤S30中“基于所述M组基因种群中每个个体的适应度,采用基因遗传算法,获得最优二进制编码”,其步骤为:
步骤S31,计算所述M组基因种群中每个个体被遗传到下一代群体中的概率:
其中,f(xi)为第i个基因种群个体的适应度函数,f(xj)为第j个基因种群个体的适应度函数;
步骤S32,依据所述每个个体被遗传到下一代群体中的概率,计算每个个体的累计概率:
步骤S33,在[0,1]区间内产生一个均匀分布的伪随机数r,若r<qi,则选择个体1,否则,选择个体k,使得:qk-1<r≤qk成立;
步骤S34,重复执行步骤S33共2M次,选出M组个体,对所述M组中每组两个个体以交叉率α触发单点交叉交换得到一个子代二进制编码;
步骤S35,以变异率βm触发所述子代二进制编码中的某一位,发生二进制0-1置换,获得最优二进制编码。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院自动化研究所;国家计算机网络与信息安全管理中心,未经中国科学院自动化研究所;国家计算机网络与信息安全管理中心许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910205999.6/1.html,转载请声明来源钻瓜专利网。