精通 python 爬虫,曾爬取首都之窗,bilibili等百万级网站,熟悉反爬虫策略,熟悉异步爬取策略,能解决解析爬虫,解密爬取等加密方式。 Java 前端开发,MySQL 数据语句,MySQL 搭配 javafx 完成图书馆系统开发, python 数据分析,处理上百万条数据并实现可视化。
多进程同时爬取 不同 bilibili 视频评论,并储存在不同的 sheet,解析爬取梨视频数据并下载,实现自动翻页,自动登录爬虫,爬取数据超百万条。熟练掌握 Java 前端开发,实现图书馆系统开发,实现查询,售卖,删除,修改,增加等功能。熟练掌握 python 数据分析,熟练运用 pandas,numpy等结构数据,并掌握可视化图形设计绘制。