1.Python中8种数据类型的精通使用
2.Python中re、requests、lxml等库的熟练使用
3.Python爬虫框架Scrapy的熟练使用
4.Python爬虫伪装中代理IP、UserAgent的熟练使用
5.Python与scrapyt-redis分布式爬虫的基本使用
6.Python操作Mysql数据库增删改查
7.Python操作MongoDB数据库增删改查
8.Python建立数据库连接池提高效率
本人具有良好的Python基础,完成过多个scrapy爬虫项目和WEB项目,能完成基本的scrapy爬虫框架和Django框架操作,熟悉MangoDB,Mysql以及SQLserver。
爬取音乐网站上的音乐并下载
爬取51网站并筛选出有用的信息
51招聘网站工作信息爬虫项目描述:
爬取网站并筛选出有用的信息