1.爬虫类相关技术,技术在不断更新,我也在不断学习
2.xpath解析,bs4,re解析
3.html,css,js等技术的掌握
4.简单linux系统的操作,以及环境的部署,这个也在学习docker和k8s
5.分布式爬虫和增量式爬虫也在学习
6.擅长员工scrapy框架爬取数据
7.热爱go语言爬取数据,这个只是简单看过一些基本的
8.熟悉mysql,了解nosql和redis数据库的操作
1.新闻数据爬取
2.电商数据爬取
3.金融数据爬取
4.校花网数据爬取
5.音乐类数据爬取
6.汽车类数据爬取
7.各种验,IP被封,滑动认证等等