掌握技术:
python中8中数据类型的精通使用,python匿名函数,列表推导式,装饰器的熟练使用。
python中re,requests,beautifulSoup等库的熟练使用。
python爬虫框架Scrapy的熟练使用
python爬虫伪装中代理IP、User-Agent的熟练使用
python与scrapyt-redis分布式爬虫的基本使用
python操作Mysql数据库的增删改查
项目经验:
基于Selenium的12306自动刷票软件
基于Scrapy爬取伯乐在线网站存入mysql数据库
基于Scrapy爬取电影天堂多页数据存入mysql数据库
基于Scrapy读书网数据入库和链接跟进