爬虫,自动化测试,接口开发,Diango,flask
掌握Python,熟悉Scrapy、Scrapy-redis、Selenium爬虫框架Pyquery、Requests、lxml。
Linux操作、正则表达式、Xpath、CSS选择器和动态JS逆向,以及HTTP传输协议。
SQL,熟悉使用MySQL、SQLServer、hive、clickhouse关系型数据库,以及Redis缓存数据库。
Tableau、Power、Excel等BI工具.
如何用Scrapy来采集天气信息(从新浪天气频道采集)
淘宝模拟登录
天猫商品数据爬虫
爬取豆瓣排行榜电影数据
多线程+代理池爬取天天基金网、股票数据
新浪微博爬虫分享(一天可抓取 1300 万条数据)
新浪微博分布式爬虫
Python爬虫,京东自动登录,在线抢购商品