Python中8种数据类型的精通使用,re、requests、beautifulSoup等库的熟练使用,爬虫框架Scrapy的熟练使用,Python爬虫伪装中代理IP、UserAgent的熟练使用,scrapyt-redis分布式爬虫的基本使用,操作Mysql数据库增删改查,操作MongoDB数据库增删改查,建立数据库连接池提高效率,numpy、scipy和数据分析库pandas的熟练使用
一、分析微博js加密,抓取点赞,评论转发。二,淘宝商品数据字段,图片抓取保存分析。三,58同城,boss直聘,51job等招聘网站岗位薪资抓取