熟练掌握Python爬取技术,计算逆向解析,scrapy框架,djiango框架,数据可视化分析。匿名函数、列表推导式、装饰器的熟练使用。爬虫伪装中代理IP、UserAgent的熟练使用。操作Mysql数据库增删改查。数据分析库pandas的熟练使用
对抖音深度爬取,淘宝,拼多多,企查查等网站进行深度爬取。基于Selenium的12306自动刷票软件。基于Scrapy爬取伯乐在线网站存入mysql数据库。基于GradientBoosting模型的厦门市房价预测系统
基于Selenium的12306自动刷票软件。.基于Scrapy爬取伯乐在线网站存入mysql数据库,数据可视化分析
爬取今日头条一万条图片,存储,js逆向解析。应用scrapy框架爬取头条数据,批量获取数据。验证码,登录,js异步加密,等各种反爬措施的应对;