移动环境下的搜索引擎软件系统设计与实现.doc

《移动环境下的搜索引擎软件系统设计与实现.doc》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、.word可编辑.移动环境下的搜索引擎软件系统设计与实现摘要在互联网时代，搜索引擎技术是一项重要的技术，作为核心的支撑技术之一，在搜索引擎技术的帮助和推动下，人们对互联网上丰富的信息进行有效而快速的检索，从而在信息库中及时获取自身所需的信息。而目前，随着以手机、平板电脑为代表的移动互联网终端的普及和使用，越来越多的搜索需求开始转变为在移动环境下，对网络信息的搜索和汇集，已经成为今后网络搜索技术发展的新热点。从目前的情况来看，移动互联网方面，特别是移动互联网终端方面的搜索技术发展还有待提高，用户体验和用户需求方面还需要进一步的挖掘，对资源搜索收到限制较多的移动

2、互联网环境，如何在有限的条件（包括移动互联网终端较小的显示屏幕，比较差的CPU处理速度以及时效性不高的移动互联网数据）下，对移动互联网搜索进行深耕细作，开发出在移动互联网终端上进行快速检索的新型搜索引擎，同时结合用户的体验和移动互联网技术的发展进行不断的更新和优化，成为笔者在对相关领域进行研究时的主要动力之一。一般来说，关键字聚类搜索是目前国内互联网搜索引擎中常用的研究技术，通过关键字的检索，可以帮助移动互联网终端用户能够用更短的时间，搜索到最精准的信息，从而为自身的搜索应用提供良好的用户体验。本文针对目前移动互联网时代的大背景，设计了在移动互联网时代能够运

3、用现代搜索技术，对手机移动端的搜索技术进行改良。建立在对关键字进行聚类分析的搜索引擎，是移动互联网目前发展的主流方向，也是本文也重点研究的领域，对于基于聚类搜索技术的应用，能够给以手机、平板电脑为代表的移动设备提供更好的互联网体验。而从搜索引擎服务提供商的角度来说，易用性强的搜索引擎技术能够给服务运营商带来更好的营销基础。本文在全文中，贯穿设计了一个能够在移动互联网领域运行的搜索引擎软件，即“妙搜”移动搜索引擎系统。通过改搜索引擎，我们能够在采集数据中，对搜索的结果及其列表进行聚类法搜索，很大程度上对搜索的结果进行分类和快速检索，方便客户快速得到所需信息和相

4、关内容。此外，本文还对搜索内容的原文抓取，中文内容分析，以及对手机移动端的用户体验进行了详细的分析和设计，同时针对手机移动端的特殊情况，对搜索引擎软件进行了优化，解决了长期以来，移动客户端搜索引擎存在的不足和弊端，最大限度的满足目前移动互联网时代对移动端搜索引擎服务的各种需求。关键词：搜索引擎；数据挖掘；聚类；lucene；Nutch；hadoop；carrot2；LINGO；结构第一章绪论1.1移动搜索的现状1.2目前存在的问题1.3本文的主要内容1.4本文的章节安排第二章搜索引擎关键技术介绍2.1搜索引擎的定义2.2搜索引擎的发展现状2.3搜索引擎系统运

5、行的几个步骤.专业.专注..word可编辑.2.4本章小结第三章LINGO聚类算法分析3.1聚类的概念3.2LINGO算法概要3.3LINGO算法基础之后缀数组3.4LINGO算法基础之隐含语义分析3.5LINGO算法过程分析3.6LINGO聚类算法的优缺点3.7本章小结第四章妙搜移动搜索引擎系统的需求分析4.1系统研究背景4.2系统需求4.3系统功能目标4.4系统性能要求4.5本章小结第五章妙搜移动搜索引擎系统的分析与设计5.1系统总体目标5.2软件技术平台的选择5.3妙搜服务系统架构设计5.4内容爬取子系统设计5.5索引子系统设计5.6搜索处理子系统设计

6、5.7中文分词算法设计5.8聚类设计5.9缓存子系统设计5.10通信接口层设计5.11本章小结第六章妙搜移动搜索引擎系统的实现6.1开发及部署环境6.2Nutch运行环境安装与配置6.3Nutch中中文分词的实现6.4Nutch聚类实现6.5搜索处理子系统实现6.6移动客户端实现6.7本章小结第七章结论.专业.专注..word可编辑.第一章绪论目前人类社会已经发展到互联网时代，互联网时代的典型特征即是电脑在人们的生活中所占的地位越来越重要。无论是PC端还是移动端，互联网对于人们学习和工作的重要作用有目共睹，通过互联网，极大的丰富了人们的生活内容和视野，也有利

7、于人们通过互联网获得更高的生产力，从而极大的提高人类社会的物质生产水平，进而不断提高人民生活水平；同时，互联网的应用和推广，也给人类的精神世界带来了充足的养分，使得人们能够更加广泛的接触到世界各地的人文风土人情，了解不同文化的差异和世界各民族、国家的智力成果，通过资源共享，实现智力成果的交流和互通。在这样的大背景下，网络技术已经成为能够影响人类生活和生产活动的重要生产力，网络技术已经开始极大的影响和改变着人类文明的发展。随着商业互联网时代的进一步扩展，网络技术中的重要一环——搜索引擎技术的作用和地位愈加凸显，成为在互联网相关领域技术中，最重要的内容之一。从世

8、界各国的商业案例来看，互联网公司往往能够赢得比较好的