基于爬虫的搜索引擎的设计与实现任务书

1. 毕业设计（论文）的内容和要求

本课题预计是用java爬虫以及python爬虫抓取数据，分几个主要方面的的抓取。比如抓取酷我音乐里面的歌名，专辑，歌手，以及路径。再比如抓取各地每个电影院，或者娱乐中心这些场所的信息，电话，利用地图api获得地址，或者抓取购物网站的某个商品信息，进行对比来看哪个购物网站的该商品便宜。界面就是一个搜索框，输入搜索信息提交然后从数据库中查询出爬虫爬出的信息，生成搜索结果。

2. 实验内容和要求

内容：课题是基于爬虫的搜索引擎的设计与实现。需要完成爬虫功能，对已抓取的数据进行增查等功能

要求：能够抓取网上数据，对数据进行整理分析。目前使用的是java爬虫，要求保留java爬虫，引入python爬虫。完成界面设计。

3. 参考文献

[1] 田家旗.java开发语言的开发平台与j2ee编程技术问题研究[j].信息技术与信息化，2016,04.

[2] bruce eckel. thinking in java[m]. upper saddle river, new jersey, usa: prentice hall, 2006.

[3] 赛奎春. java工程应用与项目实践[m]. 机械工业出版社，2002.8.

4. 毕业设计（论文）计划

第一阶段：毕业设计选题，选题完成，功能需求分析，毕设功能确定，预计一周。

第二阶段：毕业设计搭建框架，设计模式，学习java爬虫，python等技术功能实现，预计四周。

第三阶段：完善中期检查出的毕设功能问题。按照要求开始着手写毕业设计说明书，开始准备毕业设计答辩的各项事宜，预计两周。