熟练python,熟悉Scrapy框架,熟练selenium、pandas、dataframe等模块,熟练mysql,熟悉分布式爬虫,熟悉matplotlib简单制作一些可视化报表,会Java基础知识,学习能力强,上手速度快。
完成某公司可视化报表,我做主要数据采集清洗。运用python,接一些简单爬虫任务,运用python,熟悉一些简单反爬技术,写到数据库。
这是一份某公司,年度收益报表,我运用python做的数据采集数据处理与可视化,协助其他人完成分析工作。
数据爬取,持久化存储,运用scrapy框架,对目标网页的标签图片采集,遇到一些反爬MD5,base63,rsa等。