一、需求描述:
类别: python开发(不黑产只是用于分析)
进度:已经有产品文档、原型图、UI,需要技术开发。
功能:
二、人才要求:
之前有过开发经验的优先
根据公司业务需求,爬取58同城网简历。
1)使用scrapy爬虫框架;正则和xpath解析响应数据;mysql数据库存储。
2)数据清洗(numpy,pandas,matplotlib)模块,
3)项目部署项目部署在Linux系统。
4)定期备份MySQL数据,删除已备份的数据。
5)反爬手段: 会解决验证码难点
三、参考产品:
纷简历(比这个简单只是用于爬取简历,只用于分析,不用于黑产)
四、合作方式:
开发方式:远程开发。