【硕士论文】基于石河子大学校园网的搜索引擎系统的设计与实现.pdf

《【硕士论文】基于石河子大学校园网的搜索引擎系统的设计与实现.pdf》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、摘要摘要互联网的迅速发展使信息检索的环境发生了重大变化，搜索引擎的出现改变了人们对信息的使用习惯，提高了信息的使用效能，成为一个新的研究、开发领域。但面对大多数校园网是内网的情况，大型通用搜索引擎往往处理不到，校园网搜索引擎服务已经成为高校校园内最重要的服务之一。本文在研究Web搜索引擎的基本原理、核心技术和处理流程的基础上，结合校园网搜索引擎的个性化需求，搭建了石河子大学校园网搜索引擎系统。不仅完成了整个搜索引擎框架的设计，而且基本上完成了所有的开发工作。本文论述了系统开发的背景和国内外搜索引擎技术发展现状，详细阐述了该系统的开发过程和方法，并分析、讨论了影响搜

2、索引擎检索性能的相关技术。通过对搜索引擎中常用排序算法的比较分析，结合校园网的特点和用户需求，提出了TF／IDF与页面版式和网页层次值加权求和的网页相关度算法。最后对系统进行了综合测试和评价，达到了较好的预期效果。与传统搜索引擎相比，在校园网内部，检索效率得到优化，并有效控制了搜索过程中“主题漂移”的现象。为迸一步学习、研究和应用搜索引擎、文本挖掘等技术起到积极作用。关键词搜索引擎；网络爬虫；排序算法；相关度北京T、lk人学T程硕lj学化论文AbstractWiththefastdevelopmentoftheInterent，theenvironmentfors

3、earchinginformationhaschangedalot．AndtheappearanceofWebSearchEngine(WSE)haschangedpeople’Shabitsofusinginformation；alsoimprovedtheefficiencyofusinginformation．Thus，WebSearchEnginehasbeengreatlystudiedanddevelopedforalongtimeasanewfield．Butmostcampusnetworksareintemalnetworks，somecommo

4、mlyusedSearchEngingesareallinlargescale，theycannotbeusedtosearchefficientlyincampusnetwork．Undersuchcircumstances，SearchEnginebasedoncampusnetworkhasbecomeoneofthemostimportantservecsincampusesofuniversities．Inthispaper,underthestudyoftheWSE’Sbasicprinciples，coretechnologyandprocessin

5、gprocedures，combinedwithpersonalizeddemandsofWSEbasedoncampusnetwork，theauthortalkesabouttheestablishmentofWSEbasedoncampusnetworkofShiheziUniversity,notonlythedesignofitsframe，butalsothewholeprocessofitsdeveloping．TheauthortalkesaboutthebackgroundoftheestablishmentofthisWSEbasedoncam

6、pusnetworkofShiheziUniversityandthepresentdevelopmentofWSEtechnologyathomeandabroad，explainesindetailtheprocessandwaysofthedevelopingofthissystemandalsoanalyzesanddiscussessomerelevanttechniqueswhichwouldinfluencetheefficiencyofasearchengine．Bycomparingandanalyzingsomecommonlyusedways

7、ofrankinginWebSearchingEngine，combiningwiththecharacteristicsofcampusnetworkandthedemandsoftheUSerS，inthispapertheauthorcomesupwithPageRankingRelativeDegreealgorithmofTF／IDF,PagelayoutandPageRank．Andthen，atlastinthepapertheauthorintroducestheoveralltestoftheWebEngninesystemandtheevalu

8、ation