三年python开发经验,熟练 python 后端开发以及 Web 开发(Django,Flask等),掌握爬虫开发技术(能够有效处理发爬虫手段,PC端js解析,Andriod端逆向),熟练前端开发(js,vue等),具有Linux端python开发经验。有分布式系统开发经验。具有多种数据库(MySQL,Mongodb,Redis等)处理经验。
分布式爬虫平台开发项目(前后端分离—vue,flask),有独特的一套爬虫策略系统。
各种PC端网页、Android端app的数据爬取脚本,及scrapy项目。(涉及音频、视频、文本、接口等领域)
各种功能模块的设计及开发
爬虫平台管理,各种爬虫脚本管理,前端内容展示,可以进行相应的操作,前后端分离的一个项目,采用Master-Slave系统进行爬虫脚本调用。
逆向某铃声app,请求接口是通过native层进行aes加密,动态调试指定so文件,获取key,编写脚本爬取该app信息