1.Django框架搭建web网站,linux系统上运用uwsgi+nginx部署项目
2.熟练运用爬虫库爬取数据,会多种形式解析方法
3.解析后的数据可以存入为txt,xml,mysql,mongo等
4.分布式爬虫,运用scrapy-redis采集海量数据,利用redis做缓存层,效率更高
1.爬取京东商城海量商品信息数据
2.爬取瓜子二手车大量车辆信息,为用户网站做数据分析
3.利用Django框架搭建客户相册集网站
4. 爬取书旗,豆瓣等书站,获取海量图书信息,存入mongo数据库