基于意见挖掘技术的网购评论倾向性分析的研究与应用

《基于意见挖掘技术的网购评论倾向性分析的研究与应用》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、东华大学硕士学位论文基于意见挖掘技术的网购评论倾向性分析的研究与应用姓名：范英翔申请学位级别：硕士专业：计算机应用技术指导教师：宋晖2011-12摘要基于意见挖掘技术的网购评论倾向性分析的研究与应用互联网的高速发展使得网上购物越来越盛行，这极大改变了人们的购物方式。而人们对商品及购物过程的感受，也从口口相传发展为以网购评论的方式来传播。网购评论，不论对于普通购买者还是产品生产者都极为重要。本文力求通过从网购评论中分析、提取人们对商品的情感倾向，进而帮助消费者选择适合的商品，也帮助生产者有针对性地提高产品质

2、量。基于意见挖掘的文本倾向性分析一般是将文档或句子看作词、短语或模式的集合，通过识别关键词、短语或模式，并计算其倾向性值，再将结果累加得到待分析文档或句子的倾向性值。文本倾向性分析一般通过数据采集、文本预处理、倾向性识别与判断以及结果展示等四个步骤实现。本文深入地研究了现有的文本倾向性分析方法，从京东商城上抓取网购评论数据，通过对数据的分析和统计，总结了网购评论数据的特点，进而提出基于词性模式的抽取和合并算法(POSEM算法)，应用该算法抽取出训练数据集中的有效词性模式，再根据词性模式的特点，设计了模式匹

3、配规则，最后，运用这些规则，从测试集中抽取出中心词和评价词，并实现了评论语句的倾向性判别。实验结果表明，本文提出的方法取得了较高的精确率和召回率。渤j‰⋯摘要本文的主要工作如下：(1)本文结合现有的文本倾向性分析理论，对获得的网购评论数据进行了深入地分析和统计，总结了网购评论数据与倾向性分析相关的特点：评论句子中，形容词对倾向性判别的贡献最大，其在主观句中的数量与总数的比例最大，达到86．87％；名词、副词的贡献次之，比例分别达到71．64％和70．79％；其他词性，如动词、介词，对倾向性的分析也有重要的

4、作用。(2)基于对网购评论数据的分析，本文设计并实现了基于词性模式的抽取与合并算法(POSEM算法)。该算法使用“POS＼T＼0”表示词性模式信息，并对词性模式的长度、在数据集在出现的频率和出现在主观句中的概率，分别设计了长度阈值、频度阈值和上下限概率阈值。其中，满足下限概率阈值的模式用于否定评论句子的倾向性。抽取算法从预处理后的训练文本数据中，抽取出满足全部阈值的词性模式。对于仅符合长度阈值和上下限概率阈值的模式，在保留模式中的中心词和评价词信息的前提下，合并算法尝试将其进行合并，以获得能够满足全部阈值

5、要求的模糊模式。这样的设计可以在一定程度上提高倾向性分析的召回率。(3)基于对POSEM算法抽取到的词性模式的分析，本文设计了模式匹配规则，并从测试文本数据中识别出中心词、评价词，再利用以高精确率抽取得到的中心词和评价词来处理剩余的未处理文本，最后根据总结出的倾向性判别规则得到评论句子的倾向性。通过对实验结果的分析，本文提出的方法具有较高的精确率和召回率。摘要(4)本文设计实现了一个通用的文本倾向性分析框架。该框架可以灵活地替换组件，以满足不同的实验需要。在预处理模块，系统为词性定义了统一的格式，当替换不

6、同的分词工具时，只需要将其自定义的词性格式简单地转换为系统的格式即可。在文本分析模块，系统可以方便地替换训练、测试及应用组件。基于上述的框架，整合开源工具，本文设计实现了一个文本分析的原型实验平台。该平台集成了数据采集模块、文本预处理模块、文本倾向性分析模块和结果展示模块。关键字：文本倾向性分析；词性模式；网购评论；意见挖掘ABSTRACTOPINIONMD姐NGBASEDSENTIⅣ匝NTANALYSISFORONLINEPRODUCTSREVIEWSRESEARCHANDAPPLICATIoNTher

7、apiddeVelopmemoftheIntemetmakesonIineshoppingmoreaJldmorep叩ular，whichgreatlychangesthemodelforconsumption．Thefeelingsforpeopletogoodsa11dtheprocessofshoppingspreadnotjustbywordofmouthbutalsobytheonlinereviews．Thent11eonlinereviewsareimportantnotjustforcon

8、sumersbutalsofortheproducers．Thepaperseekstoa11alyzetheonlinereViewsandeXtracttheattitudesandemotionsofpeopletothegoods，funhermore，helpsconsumerschooseproductsandproducersimproVequalityofproducts．Generally，sentiment