基于爬虫技术的团购网站数据分析–以拉手团购网站为例开题报告

1. 研究目的与意义

研究目的： 本文的研究目的是通过爬虫程序抓取拉手网站十个城市下产品每日销售额、以及销售量。

以此来分析各地区消费者的消费习惯以及当地的经济水平。

研究意义： 团购网站就是基于互联网的新兴消费模式。

2. 国内外研究现状分析

国内研究现状对于团购网站来说，通过数据采集、挖掘的手段，会出现一些有趣的结果。

国内当然也会有人利用一些网页爬虫程序，来采集这些团购网站的数据。

36氪网站联合创始人lcc与中国科学院王仿坤同学就利用java语言和mysql数据库，抓取了来自十五个团购网站的数据。

3. 研究的基本内容与计划

研究内容： 1 绪论 1.1 研究意义 1.2国内外研究现状 2 爬虫技术 2.1 爬虫技术介绍 2.2 爬虫程序 3 拉手网站的数据分析 3.1 数据的采集 3.2 爬虫数据分析 4 结论 4.1不同地区的消费习惯和当地的经济有很大的关系 4.2生活服务类的团购产品更有前景和发展空间 4.3拉手团购网站的销售额与所在地区经济的发达程度呈正比 4.4人们对食品的需求依然是最大的且与地域无关 5 总结研究计划如下： 2011年11月中旬11月下旬：建立论文框架，收集资料 2011年12月上旬12月中旬：文献综述 2012年1月下旬2月中旬：对网站进行分析 2012年2月下旬4月中旬：代码编写、测试 2012年4月下旬： 对获得的数据进行分析 2012年5月上旬： 初稿完成、修改 2012年5月中旬： 论文定稿、印刷

4. 研究创新点

本文利用爬虫程序针对当下比较热门的团购网站进行数据抓取，并分析数据背后隐藏的内容。