网络爬虫在信息获取领域的应用毕业论文

《网络爬虫在信息获取领域的应用毕业论文》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、题目网络爬虫技术在信息获取领域的应用专业学生姓名班级学号指导教师指导单位毕业设计（论文）原创性声明和使用授权说明原创性声明本人郑重承诺：所呈交的毕业设计（论文），是我个人在指导教师的指导下进行的研究工作及取得的成果。尽我所知，除文中特别加以标注和致谢的地方外，不包含其他人或组织已经发表或公布过的研究成果，也不包含我为获得及其它教育机构的学位或学历而使用过的材料。对本研究提供过帮助和做出过贡献的个人或集体，均已在文中作了明确的说明并表示了谢意。作者签名：　　　　　日　期：　　　　　指导教师签名：　　　　　日　　期：　　　　　使用授权说明本人完全了解大学关于收集、保存、使用

2、毕业设计（论文）的规定，即：按照学校要求提交毕业设计（论文）的印刷本和电子版本；学校有权保存毕业设计（论文）的印刷本和电子版，并提供目录检索与阅览服务；学校可以采用影印、缩印、数字化或其它复制手段保存论文；在不以赢利为目的前提下，学校可以公布论文的部分或全部内容。作者签名：　　　　　日　期：　　　　　学位论文原创性声明本人郑重声明：所呈交的论文是本人在导师的指导下独立进行研究所取得的研究成果。除了文中特别加以标注引用的内容外，本论文不包含任何其他个人或集体已经发表或撰写的成果作品。对本文的研究做出重要贡献的个人和集体，均已在文中以明确方式标明。本人完全意识到本声明的法律

3、后果由本人承担。作者签名：日期：年月日学位论文版权使用授权书本学位论文作者完全了解学校有关保留、使用学位论文的规定，同意学校保留并向国家有关部门或机构送交论文的复印件和电子版，允许论文被查阅和借阅。本人授权　　　　大学可以将本学位论文的全部或部分内容编入有关数据库进行检索，可以采用影印、缩印或扫描等复制手段保存和汇编本学位论文。涉密论文按学校规定处理。作者签名：日期：年月日导师签名：日期：年月日摘要现在，大多数人们获取信息的途径已经不再是报纸和电视，而是互联网，一个曾被人们所漠视的领域，突然成为了人们获取信息的主要途径。人们等车前不会拿着报纸埋头读报，而是拿着手机翻看着网页，新闻；人们回到家也

4、不会迫切的打开电视收看新闻，而是打开电脑查看这一天的新闻趣事。这一切的一切都要归功于搜索引擎，而一个搜索引擎的核心就是网络爬虫。这篇论文就为大家介绍并实现一个简单的网络爬虫。本论文一共分为四章，第一章介绍了课题的背景和网络爬虫的现状；第二章介绍了网络爬虫的原理和构架；第三章说明了实现网络爬虫的基本构思和一些需要注意的协议算法；第四章展示了我的制作过程，结果，java代码。本篇论文向大家展示了爬虫的重要性和实用性，在现代网络中发挥的不可或缺的意义，并向大家展示了亲手实现一个网络爬虫应注意的问题和方法。向大家充分的说明了网络爬虫的原理和构架。本文中的爬虫是实用java语言在JDK软件上实现的，具有

5、一定的功能，能较好的从实践上证明之前阐述的原理以及算法。关键词：网络爬虫，spider，java，JDKABSTRACTNow,mostpeoplegettheirinformationapproachisnolongerthenewspapersandtelevision,buttheInternet,ahadbeenpeopleignorefield,suddenlybecamethemainwaypeoplegetinformation.Peoplewon'ttakenewspaperssuchasinfront,buttookcellphonenewspaperleafingthrou

6、ghtheweb,news;Thepeoplebacktohomealsowon'turgentopentelevisionnews,butopencomputercheckthisdaythenewsfun.Theyallshouldbeattributedtothesearchengine,butasearchenginecoreiswebcrawlers.Thispaperistointroduceandimplementasimplewebcrawlers.Thisthesisissplitintofourchapters,thefirstchapterpresentsthebackg

7、roundandthesubjectstatusofwebcrawlers;Thesecondchapterpresentstheprincipleandthenetworkcrawlerframe;Thethirdchapterillustratesthebasicconceptionrealizethewebcrawlerandsomenoteagreementalgorithms;Thefo