ID：140025
青花瓷
python工程师
- 公司信息：
- 北京亚鼎智能科技有限公司
- 工作经验：
- 1年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 可工作日远程
- 可工作日驻场（自由职业原因）
- 所在区域：
- 上海
- 虹口
技术能力
熟练掌握 Python 语言，Linux 基本操作；
熟悉Requests, Scrapy 框架，Scrapy-Redis 分布式爬虫；
熟悉HTML，CSS，及多线程，多进程，HTTP/HTTPS协议；
熟练利用Xpath、CSS选择器，正则进行数据提取；
熟悉网络抓包 工具Fiddler，selenium模拟浏览器抓取技术；
熟悉MySQL、了解Redis，Mongodb 数据库操作；
项目经验
项目名称：京东商品爬虫
项目描述：抓取指定商品的名称，价格，促销，评论等基本信息
项目过程：
1）根据需求确定数据模型，构造请求地址；
2）解析列表页，提取商品ID, 利用fiddler手机抓包抓取json数据；
3）构造商品详情页请求，实现翻页功能，jsonpath提取促销，评论信息；
4）数据保存到Mongodb中，构建User-Agent池，IP池防止反爬；
项目名称：链家网爬虫
项目描述：链家网二手房成交房源信息抓取
项目过程：
1）分析网站结构，利用xpath解析，构建各级区域链接；
2) 解析页面，获取房源信息，实现翻页功能；
3）使用 scrapy-redis 构建分布式爬虫，构建IP池,UserAgent池；
4）编写 spider，调试爬虫程序及处理 bug，保存数据到Mongodb；
相似人才推荐
-
500元/天python工程师华信概要：本人本科毕业，在校期间所学专业为大数据方向，能熟练使用python语言进行各类数据抓取和处理，能使用
-
500元/天python后端工程师绿盟科技概要：1：熟悉Linux开发环境，熟练掌握python编程 。 2：熟练掌握HTML，CSS，JavaS
-
600元/天高级python工程师中软国际概要：python：多线程/进程、socket等模块、Django、Celery PHP：think
-
600元/天Python 开发某软件公司概要：1. Web 服务部署、配置和监控 2. Ansible 自动化 3. AWS、GCP、Azur
-
500元/天高级Python成都路行通概要：本人有4年python相关工作经验，掌握基于Django框架的Web开发，熟悉并使用过Tornado -
500元/天python后台开发红云概要：python后端 flask MongoDB mysql shell 简单golang
-
500元/天python开发工程师量锐概要：熟练掌握python语法，常见类库的调用。 熟练掌握django框架的中间件运用，缓存的运用。熟练
-
500元/天Python后端工程师西安四叶草信息技术有限公司概要：熟悉Python爬虫，了解各项反爬手段，均有妥善的处理方法。 熟悉自然语言处理和数据挖掘，对抓取的
