ID：121314
裴鹏鹏
python 爬虫工程师
- 公司信息：
- xxxxx
- 工作经验：
- 2年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 下班后
- 周六
- 可工作日远程
- 可工作日驻场（离职原因）
- 所在区域：
- 北京
- 全区
技术能力
熟悉Python 语言，熟练使用Python常用模块
熟悉Linux系统，了解常用的shell命令和vim命令
了解网络通信基础
熟悉网页抓取原理及技术，熟悉基于Cookie的网站登录原理
熟悉Python与数据库（mongodb,redis,mysql）交互存储
熟悉Python爬虫开发使用的XPATH，CSS, 正则等数据抽取技术
使用Selenium模拟网页进行动态网页数据的爬取，熟悉一般的多线程数据爬取
熟悉使用Scrapy框架实现爬虫，数据保存入库
熟悉数据库SQL语句
项目经验
使用Scrapy实现知乎模拟登陆，并爬取所有问题字段和回答字段
使用Scrapy爬取伯乐在线所有文章信息异步保存入mysql数据库
寻找天猫数据接口，使用Scrapy爬取天猫某品牌商品价格，名称，id,销量数据并保存
使用多线程和队列实现爬取豆瓣电影数据并保存进mongodb数据库
使用Scrapy框架爬取北京公交网保存入redis数据库，并从redis数据库中取出数据保存进mongodb来实现数据持久化
爬取多个免费代理IP网站，获取免费代理IP并检测可用性，并使用Django做成接口API，开启服务后可随时调用接口获取可用代理，并优化结构
相似人才推荐
-
500元/天Python研发工程师中国飞机强度研究所概要：擅长数据抓取、清洗、分析及可视化： 数据抓取常用：scrpy/requests； 数据清洗、分析
-
800元/天Python研发工程师国际商业机器（中国）投资有限公司概要：专注Python开发，可以快速搭建后台，接口，API，爬虫，数据统计和分析，数据清洗以及处理。完活快
-
500元/天python 数据库某信息科技公司概要：python 爬虫， 数据文档处理，数据库开发
-
500元/天python 后端人人优活科技概要：熟悉django的开发流程， 使用各种数据提取手段，js xpath 正则可以制定完整的爬虫方案，
-
500元/天python开发工程师关麦科技概要：熟悉python web的api编写 熟悉python以及面向对象编程思想 熟悉linux常用命
-
500元/天前端开发 python爬虫保密概要：1熟悉原生Javascript,能手写JS代码,熟悉DOM操作,熟悉AJAX 2了解ps基本
-
500元/天Python爬虫工程师造数概要：1、爬虫框架\类库: Scrapy、Scrapy-Redis、Requests、urllib、Sel
-
500元/天python爬虫工程师星火概要：熟练运用python，C，C++，C#等多种语言，主要是使用python，现在专注与python爬虫
