优化特征选择的ctm模型在文本分类中的应用研究

《优化特征选择的ctm模型在文本分类中的应用研究》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、分类号密级Ｕ口Ｃ编号采中钟装欠考硕：ｔ学位论文化化精化遠择的ＣＴＭ摸型在文本分类中的应用研苑Ｖ学位申请人姓名：柄正良’申请学位学生类别：工程硕击申请学位学科专业：计算如ｉ技米指导教师姓名：每长袜到教援巧去学位论文ＭＡ＇ＳＴＥＲＳＴＨＥＳＳＩ硕ｄ：学位论文优化特征选择的ＣＴＭ模型在文本分类中的应用研究论文作者：杨正良指＾师：马长林副教授戦专业：计ＩＷＩ技术研究方向：机器学习华中师范大学计算执学院２０１６年５月硕去学位论文ＭＡＳＴＥＲＳＴＨＥＳＩＳＡｌｉｃａ

2、ｔｉｏｎｏｆＣＴＭｍｏｄｅｌＯｔｉｍｉｚａｔｉｏｎｐｐｐＦｅａｔｕｒｅＳｅｌｅｃｔｉｏｎｉｎＴｅｘｔＣａｔｅｏｒｉｚａｔｉｏｎｇＡＴｈｅｓｉｓＳｕｂｍｉｔｅｄｉｎＰａｒｔｉａｌＦｕｌｆｉｌｌｍｅｎｔｏｆｔｈｅＲｅｑｕｉｒｅｍｅｎｔＦｏｒｔｈｅＭ．Ｓ．ＤｅｇｒｅｅｉｎＣｏｍｐｕｔｅｒＴｅｃｈｎｏｌｏｇｙＢｙＹａｎＺｈｅｎｌｉａｎｇｇｇＰｏｓｔｒａｄｕａ化ＰｒｏｒａｍｇｇＳｃｈｏｏｌｏｆＣｏｍｕｔｅｒｐＣｅｎ化ａｌＣｈｉｎａＮｏｒｍａｌＵｎｉｖｅｒｓｉｔｙＳｕｅｒｖｉｓｏｒ：ＭａＣｈａｎｇｌｉ

3、ｎｐＡｃａｄｅｍｉｃＴｉｔｌｅ：ＡｓｓｏｃｉａｔｅＰｒｏｆｅｓｓｏｒＳｉｎａｔｕｒｅｇＡｒｏｖｅｄｐｐＭａｙ，２０１６硕壬学位论文ＭＡ＇ＳＴＥＲＳＴＨＥＳＩＳ华中师疮大学学侄冷文廣创牲京巧和使用狡枚说巧尿准１牲京巧本人郑重声明：所呈交的学位论文，是本人在导师指导下，独立进行研究工作所取得的研巧成果。除文中己经标明引用的内容外，本论文不包含任何其他个人或集体己经发表或撰写过的研巧成果。对本文的研究做出贡献的个人和集体，均己在文中明确方式标明。本声明的法律结果由本人承担。《作者签《：曰期：年月曰／学化冷文狀权使用援权书本学

4、位论文作者完全了解学校有关保留、使用学位论文的规忠即：学較有权保留并向国家有关部口或机构送交论文的复印件和电子版允许论文被查阅和借阅。本人授权华中师范大学可Ｗ将本学位论文的全部或部分内龍入有关数据库进行检索，可采用影印、缩印或扫描等复制手段保存和汇编本学位论文。同意华中师范大学可Ｗ用不同方式在不同媒体上发表、传播学位论文的全部或部分内备作者签名：导师签；日期：月日日期：年＾月日＾年＜＾／Ｉ＂＂本人己经认真阅读ＣＡＬＩＳ高校学位论文全文数据库发布章程，同意将本人的＂＂＂＂学位论文提交ＣＡＬＩＳ高校学位论文全文数据库中全文发布，并可按章程中的同意论古播

5、々后滞后一年规定享受相关权益。：□半年：□：□二年发布。作者签名：导师签；曰期：７〇１１年（月曰曰化日ｆ护（月（＞６硕壬学位论文ＭＡＳＴＥＲＳＴＨＥＳＩＳ摘要随着互联网的快速发展、海量信息的出现，人们己经从信息资源匯乏的年代过渡到信息资源丰富的大数据时代。如何快速、有效地从海量信息中提取所需的信息一大挑战一是当今信息科学和技术领域面临的，而文本分类就是解决这问题的途径一之。其中特征选择和文本表示是影响文本分类的重要因素，现阶段相关主题模型ＣＴＭ（ＣｏｒｒｅｌａｔｅｄＴｏｐｉｃＭｏｄｅｌ）己作为有效的文本表示方应法用在文本分类中，

6、该模型能很好的表现出主题之间的相关性，同时在力求保证信息完整性的条件下有效地降低文本数据的维度，对分类精度和速度都得到了提髙。然而该模型输入特征的选择和最优主题数的确定仍然是一大难题。本文针对ＣＴＭ模型在文本分类中的特征选择方法，Ｗ及模型的最优主题数确定一工作做了；定的研究，完成了Ｗ下（１）分析当前文本分类中文本表示遇到的困难化及ＣＴＭ模型在文本表示中的优点；（２）采用基于复杂度和对数似然值的方法，确定ＣＴＭ模型中的最佳主题数；３一Ｍ（）采用种基于主成分分析与互信息相结合的ＣＴ模型特征选取方法，从而减少冗余特征；（４）基于上述理论方法，采用Ｒ

7、语言的相关函数包建立ＣＴＭ模型，并构建文本分一类实验系统，，验证了所使用方法的有效性为进步开发文本分类应用系统提供了帮助。－，工作进行了总结。最后对所做的，并对Ｗ后将要研巧的内容进行了展望：文本表示关键字；相关主题模型；主题数目；特征选取；主成分分析；互信息Ｉ．一硕击学位论文ＭＡＳＴＥＲＳＴＨＥＳＩＳＡｂｓｔｒａｃｔＷｉｔｈｔｈｅｒａｐｉｄｄｅｖｅｌｏｐｍｅｎｔｏｆｔｈｅＩ打ｔｅｍ