掌握 Html、CSS、JS、Vue +微信小程序 等前端技术与框架
掌握 Java、Python,vsb
熟悉使用 Linux系统 微信小程序开发,熟练运用mysql数据库
熟练使用 fiddler、Scrapy、Reqable、Chorom、Scrapy-Redis等爬虫工具
掌握 urllib、ruquest、Scrapy、Cookie等爬虫框架与模块
掌握 nunpy、pandas、机器学习数据分析相关模块
会数据分析的数据清洗和数据整理
主要掌握网页爬虫技术
可以应对绝大多数的反爬
1.爬取百度股市通,分析股市数据
2.批量爬取抖音用户视频发布数据
3.爬取小说网全部小说并进行整理
能运用多线程,异步编程的手段快速获取大量的数据信息并极大的提高工作效率。