学生安全信息的网络爬虫的分析与设计(MyEclipse,Java)(含录像)

学生安全信息的网络爬虫的分析与设计(MyEclipse,Java)(含录像)(任务书,开题报告,毕业论文12600字,程序代码)
主题网络爬虫由此作为一种工具,在主题搜索引擎领域,发挥着越来越重要的作用,正因如此,以主题网络爬虫为核心的主题搜索引擎成为研究的重中之重,并且对于主题网络爬虫的研究,也逐渐成为目前信息挖掘领域的热点。
功能需求分析
(1)    网页下载功能
①    能够下载任何http协议和https协议的链接的网页。
②    构造HTTP请求中的GET请求。
③    分析HTTP响应请求。
(2)    网页分析功能
①    提取网页标题。
②    提取网页关键字。
③    提取网页摘要。
④    提取网页链接并统计数量。
⑤    把新链接加入到URL队列。
(3)    内存池功能
①    能够分配固定大小的内存。
②    能够回收内存对象。
③    能够释放内存对象。
④    能够销毁内存池。
⑤    能够分配固定大小的内存。
(4)    保存功能
①    能够正确保存网页以及网页信息到文件。
②    功能把系统运行中的异常写入日志文件。
(5)    界面
①    可以配置参数和运行后台的爬虫系统。
能够查看运行结果。 
 

目  录
目  录    7
1.前言    9
1.1课题背景    9
1.2课题目标      9
1.3 课题意义    10
2.关键技术介绍    10
2.1 Jsp技术    10
2.2 Java技术    10
2.3 MySql技术    11
2.4 Jdbc桥技术    11
2.5 JavaBean技术    11
3.可行性研究    11
3.1经济可行性分析    11
3.2 操作可行性分析    11
3.3 技术可行性分析    11
3.4 可行性综合分析    11
4.系统需求分析    11
4.1系统需求分析    12
4.2 功能需求分析    12
5.总体设计    13
5.1 系统功能设计    13
5.2 系统工作流程图    14
6.系统实现    15
6.1  相关技术分析    15
6.2  系统功能模块的实现    17
7.系统测试    21
7.1测试与结果    21
7.2 测试例子    22
8.总结    23
9.参考文献    24
致谢    24