ID：203616
Devil
python爬虫工程师
- 公司信息：
- 上海创扬
- 工作经验：
- 3年
- 兼职日薪：
- 600元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 所在区域：
- 上海
- 闵行
技术能力
1.可熟练使用requests、selenium 、scrapy等库访问网页上的相关数据
2.可以熟练使用lxml 、beautifulsoup、re库，对网页数据进行筛选和解析
3.可以熟练使用csv等第三方库，对爬取下来的数据进行整理和封装。
4.可以熟练使用appium库，对手机app上的数据进行抓取
5.熟练掌握使用各种线程、进程、携程，可以快速的、准确的获取相关数据
6.能够破解Js反扒，突破80%的网页，拿到数据
7.熟练使用threading 、gevent和进程，可以方便快捷的获得数据。
项目经验
1. 能够逆向破解智联招聘（www.jobs.zhaopin.com）cookie中的acw_sc__v2字段，拿到数据（维护中）
2. 破解boss直聘__zp_token字段（维护中）
3. 搭建账号池，并破解天眼查验证码
4. 爬取网易云音乐
5. 爬取京东商品信息
6. 大众点评数据爬虫（一直维护中）
案例展示
-
智联招聘部分代码
根据跟死需求，项目分为三个部分，列表页、职位详情页、公司主页，爬取下来的数据分别保存在三张表中 反爬措施： 1. cookie加密 2. 封禁IP
-
boss直聘代码部分截图
这是boss直聘的部分代码以及运行截图，爬取的字段有：职位名称、公司logo、公司网址、地址、工资、职位福利等 反爬措施：IP，该网站对IP的质量要求非常高，并且使用了极验验证码
相似人才推荐
-
600元/天python后端工程师不知名公司概要：python 网站开发 （flask）：开发 web 后台网站, 数据展示，自动化监测，买量数据结算
-
500元/天python开发工程师佛山广宇科技发展有限公司概要：1、熟悉MVC架构，熟练使用Django、Flask常用的web开发框架，遵循 Re st ful风
-
1000元/天高级Python工程师约见科技概要：熟练Python编程，熟练使用Django、Flask、Tornado、Sanic等web框架之一
-
500元/天Python工程师京东概要：python 模拟登录 验证码识别 ocr识别 hadoop\spark\mongodb\my
-
500元/天python编程西安电子科技大学概要：本科就读于西安电子科技大学电子工程学院教改班，专业第三保研中科院空天院，熟练python、C、Mat
-
500元/天前端开发，python开发四川享宇金科概要：1.前端开发vue，react，uniapp小程序、h5、app、 2.python爬虫开发，自动
-
500元/天Python全栈武汉概要：python全栈开发，具有高并发经验，参与过秒杀业务，python全栈开发，具有高并发经验，参与过秒
-
500元/天python工程师应届生概要：python web开发，python网络爬虫其中web开发会使用Django框架进行开发，前端技术
