ID：220771
MISS杨166
爬虫
- 公司信息：
- 德霖康养科技(成都)有限责任公司
- 工作经验：
- 1年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 可工作日驻场（离职原因）
- 所在区域：
- 成都
- 金牛
技术能力
1. 熟练使用 Linux 命令，能够在 Linux 和 windows 下开发；
2. 熟练掌握 Scrapy 爬虫框架,requests 爬虫模块，了解常见的反爬规则及对应
策略
3.熟练掌握 Python 语言 常见第三方库和第三方库
4. 熟练掌握 MySQL、REDIS 数据库与相关 SQL 语句
5. 熟练掌握 Python 语言
6.熟悉常见反爬机制及应对策略 如Cookie IP Headers 及滑动等等
项目经验
项目经历
一、爬取美团/大众点评/携程等网站酒店、机票、餐饮等信息
项目概述: 为客户爬取酒店、餐饮等信息
工作职责：使用 scrapy+redis 分布式进行爬虫，部分网站使用scrapy+
selenium 爬取，抓取 JS 动态加载数据,建立字体映射关系，破解字 体反
爬，建立代理 IP 池防止屏蔽，加快爬取速度，数据存入 MySQL 数据库
二、爬取淘宝、京东、苏宁、拼多多等汽车饰品信息
项目描述：为公司数据分析提供支撑
工作职责：参与爬虫系统的架构设计与开发
负责执行和开发分布式网络爬虫进行多平台信息的抓取和分析
设计爬虫策略和屏蔽规则，保证数据的抓取
三、国内各大租房平台数据抓取
项目介绍：抓取国内各大租房网站（链家、安居客、贝壳、蛋壳 自如网等）
房源信息（地址、价格、面积、户型、楼层等 清洗并存储到数据库
工作职责：按指定要求抓取房源信息并对数据进行清洗去
重，统一格式根据城市及网站来源分表入库，以及增量抓取功能实现等
相似人才推荐
-
1800元/天java开发工程师苏州网翊科技概要：异构系统整合，能够设计出高效的系统整合方案。 软件系统架构设计，能够很准确的分析出软件需求，通过各
-
500元/天数据分析工程师江苏悦达概要：python ,大数据分析 熟悉 numpy , pandas 框架。 python web 框架，
-
500元/天图像算法工程师成都主导科技有限公司概要：1熟练掌握包括传统图像处理和基于深度学习网络的图像处理检测算法，对图像识别、分割、配准、分类都有过相
-
600元/天BMC工程师华勤通讯技术有限公司概要：在校信息管理专业大学生，侧重C++方向，熟悉掌握 C++ Windows API，Windows程序
-
500元/天全栈南通苏慧概要：Linux：CentOS，企业开发经验有。 DB：Oracle,MySQL,Access等主流DB -
500元/天高级算法工程师成都世汇通科技有限公司概要：· 1. 对图像检测、识别、分割有较深的理解和项目经验； · 2. 精通目标检测算法：YOLOv3
-
500元/天财务集成伞业有限公司概要：毕业于福州市闽江学院电子商务专业，毕业后就职于福建省集成伞业有限公司财务部工作，工作之余看视频自学p
-
500元/天数据工程师上海天正概要：1.熟悉Linux系统，对red hat suse系统有一定的理解，曾在浙江移动主机组实习过3个月
