ID：198682
arsMarvin
资深开发工程师（Python）
- 公司信息：
- 深圳世联行集团股份有限公司
- 工作经验：
- 5年
- 兼职日薪：
- 800元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 所在区域：
- 深圳
- 南山
技术能力
主要工作经验为Python爬虫，也写过Python后台服务，写过一段时间Java Web.
· 熟悉HTTP、HTTPS等网络协议及数据抓包、分析
· 熟悉使用MySQL、Redis、MongoDB、Couchbase、PostgreSQL等常见数据库
· 熟悉反爬虫机制，处理账号限制、复杂验证码、模拟登陆等疑难问题的处理
· 熟悉基于正则表达式、xpath、CSS等的网页内容抽取
· 熟悉多线程、分布式爬虫
使用过的技术及工具：
Scrapy、Requests+Gevent、Flask、Message Queue、Xpath、Beautiful Soup、xml、RegExp、PyV8、Redis、PostgreSQL、Couchbase、Selenium + phantomjs、BloomFilter等。
项目经验
【企业数据采集】
· 采集企查查、天眼查企业数据（包括工商信息、法律诉讼、企业图谱、知识产权等）
· 使用Selenium+webdriver处理登陆，模拟滑块验证码拖动
· 使用MongoDB存储
· 最多200台虚拟机同时采集
突破以下主要反爬措施：
封IP、账号频次限制、普通selenium+webdriver被拦截问题、滑块验证码。
主要使用工具和软件：
Python、Selenium、Redis、Tornado、MongoDB、Requests、OpenCV、Beautifulsoup
相似人才推荐
-
500元/天Python工程师北京车工科技有限公司概要：1、熟练Python，了解web前端 2、熟练Linux系统下开发以及相关操作命令 3、熟练Dj
-
500元/天高级python工程师、虚拟化工程师永信志诚概要：熟悉shell，python、golang语言，了解html，css，jquery，bootstra
-
500元/天python后端baidu概要：1、Ubuntu系统的使用 2、擅长python爬虫 3、flask项目 4、熟练掌握pyth
-
500元/天python开发工程师北京木瓜移动科技有限公司概要：1.python 基础扎实， 有良好的编码习惯和阅读源码习惯。 2.熟练基于 Scrapy， Se
-
600元/天高级Python开发工程师恒泽丰悦(北京)企业咨询有限公司概要：- 编程语言：熟悉Python,熟悉OOP,AOP,IOP的编程思想和常用的设计模式,了解HTML/
-
500元/天python工程师启明星辰信息技术集团股份有限公司概要：熟悉python后端开发 Django框架 熟悉restful api接口 熟悉pandas、n
-
500元/天python工程师进讯网络科技有限公司概要：熟练掌握Excel(各种骚操作要掌握，比如VBA；会做透视表；各种公式) python，一些机器学
-
500元/天Python研发工程师东方国信概要：熟练应用Python，熟练掌握web开发框架，例如Django,Flask等，熟练使用关系型数据库M
