技术能力

掌握Java、python平台技术，熟悉分布式框架springcloud、dubbo等
掌握http协议以及前端js框架jQuery、react等
掌握开源框架Selenium、webmagic、Scrapy等
掌握数据库mysql、mongodb、hbase等
掌握Elastic Search 技术
熟悉爬虫相关技术细节以及反爬手段

项目经验

爬取过国内外很多的电商网站，国内top10电商，如淘宝、天猫、京东、苏宁、国美、唯品等，主要采集商品信息、订单信息
国外如亚马逊全球网站，欧美大量电商网站，主要采集商品信息做海淘使用，实时下订单，后台订单、物流信息的采集等。

爬取过国内知名的网站：
1）如携程，途牛，采集票务以及酒店信息
2）美团、饿了么，采集店铺等其他信息

开发过完整的分布式爬虫框架，有自己专门的爬虫团队来做兼职，并且目前有人能够全职处理

团队情况