[发明专利]一种基于邻域粗糙集的文本特征约简方法在审
申请号: | 201910571271.5 | 申请日: | 2019-06-28 |
公开(公告)号: | CN110598192A | 公开(公告)日: | 2019-12-20 |
发明(设计)人: | 谢珺;段利国;郝晓燕;梁凤梅;续欣莹;靳红伟 | 申请(专利权)人: | 太原理工大学 |
主分类号: | G06F17/24 | 分类号: | G06F17/24;G06F16/33;G06F17/27 |
代理公司: | 14110 太原晋科知识产权代理事务所(特殊普通合伙) | 代理人: | 任林芳 |
地址: | 030024 *** | 国省代码: | 山西;14 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 约简 预处理 词频 正域 邻域粗糙集 重要度 邻域 文本 定义邻域 构造文本 决策系统 邻域关系 算法计算 特征词项 文本特征 预设条件 中文分词 停用词 放入 构建 集合 刻画 输出 改进 | ||
1.一种基于邻域粗糙集的文本特征约简方法,其特征在于,包括以下步骤:
将进行特征简约的文本进行预处理;其中预处理的方式至少包括中文分词、去停用词;
用TF-IDF算法计算预处理后文本中特征词项的权值,并构造文本决策系统;
定义邻域δ-,并求出每个词频下的邻域,判断并输出正域,从中寻找最大正域;
根据最大正域计算词频重要度,如果词频重要度满足预设条件,则放入约简集合。
2.根据权利要求1所述的基于邻域粗糙集的文本特征约简方法,其特征在于,所述构造文本决策系统为:
TDS=(TU,TC∪D,V,f),其中,TU=D1∪D2∪...∪Dn,词频属性子集B={a1,a2,...an},词频矩阵中且i,j∈n,定义x,y的在词频向量下的邻域δ-为:邻域半径为δai。
3.根据权利要求1所述的基于邻域粗糙集的文本特征约简方法,其特征在于,定义邻域δ-为:邻域半径为δai对属性子集B求解协方差矩阵v,计算公式如下:
并求解其逆矩阵v-1。
4.根据权利要求1所述的基于邻域粗糙集的文本特征约简方法,其特征在于,预设的词频重要度满足条件为:
属性重要度参数η的计算方法如下,将属性集合与约简集合的差值应该控制在指定范围内,从而控制正域的选择,提高约简效率,θ是一个调节参数;
其中,θ为调节参数。
5.根据权利要求1所述的基于邻域粗糙集的文本特征约简方法,其特征在于,TF-IDF是以特征词项在文档中出现的次数与包含该词项的文档数之比作为该词的权值,具体计算公式如下:
其中,tj表示文档中特征词项t的词频,N表示文档总数,nj表示包含词项t的文档数。
6.根据权利要求1所述的基于邻域粗糙集的文本特征约简方法,其特征在于,词频重要度的计算公式为:
7.根据权利要求6所述的基于邻域粗糙集的文本特征约简方法,其特征在于,如果词频重要度满足预设条件,则将词频放入约简集合RED=RED∪TCK;否则记录K值,并令RED=RED+TCK,S=S-POSK,再次计算正域及词频重要度,判断满意度是否满足预设条件。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于太原理工大学,未经太原理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910571271.5/1.html,转载请声明来源钻瓜专利网。