毕业于河南理工大学,有一年的数据采集经验,参与公司的分布式网络爬虫框架构建。主要是负责应对反爬虫机制,数据该领域中大多数的反爬机制,能够解决客户需求。比较熟悉Scrapy框架以及自动化Selenium的应用。对于js逆向也有一定的研究。在职期间绩效良好,被评为优秀员工。对于较小项目,能够独立完成。
工作项目:1.12306抢票接口开发:主要负责模拟登录,余票剩余情况
2.安居客房源数据采集并分析:主要负责通过分布式爬虫对相关数据的爬取及持久化存储
角色 | 职位 |
负责人 | 爬虫工程师 |
队员 | 前端工程师 |