本科毕业设计
题目：基于网络爬虫的搜索引擎设计与实现
系别：专业：计算机科学与技术班级：学号：姓名：同组人：
指导教师：协助指导教师：
教师职称：教师职称：
f摘要
本文从搜索引擎的应用出发，探讨了网络蜘蛛在搜索引擎中的作用和地住，提出了网络蜘蛛的功能和设计要求。在对网络蜘蛛系统结构和工作原理所作分析的基础上，研究了页面爬取、解析等策略和算法，并使用Java实现了一个网络蜘蛛的程序，对其运行结果做了分析。
关键字：爬虫、搜索引擎
fAbstract
Thepaper，discussi
gfromtheapplicatio
ofthesearche
gi
e，searchestheimporta
cea
dfu
ctio
ofWebspideri
thesearche
gi
e．a
dputsforwarditsdema
doffu
ctio
a
ddesig
．O
thebaseofa
alyzi
gWebSpider’ssystemstrtucturea
dworki
geleme
ts．thispaperalsoresearchesthemethoda
dstrategyofmultithreadi
gscheduler，Webpagecrawli
ga
dHTMLparsi
g．A
dthe
．aprogramofwebpagecrawli
gbasedo
Javaisapplieda
da
alyzed．
Keywordspidersearche
gi
e
f目录
摘要2
Abstract3一、项目背景5
11搜索引擎现状分析512课题开发背景513网络爬虫的工作原理8二、系统开发工具和平台821关于java语言822Jbuilder介绍1023servlet的原理11三、系统总体设计1331系统总体结构1332系统类图13四、系统详细设计1741搜索引擎界面设计r