案例介绍
负责根据需要爬取的数据进行需求分析，分析目标网站的网站结构和一些反爬手段；
负责通过requests、scrapy、scrapy-redis、xpath等技术手段编写爬虫程序进行内容抓取，对抓取到的数据进行清洗过滤，分表存储，以供其他部门使用；
负责定期维护ip代理池，清除失效代理ip，根据爬取过程中遇到的一些反爬手段，优化自己的程序；
负责使用web的Django框架参与其他公司内部软件的开发；
负责数据的去重，清洗，对于亚马逊ip反爬，检测验证码，制定具体应对措施
案例图片
相似案例推荐
其他人才的相似案例推荐
-
智慧系统
智慧系统 检测农贸市场每天的人流量，展示每日菜价，市场风
-
智慧系统
智慧系统 检测农贸市场每天的人流量，展示每日菜价，市场风
-
操控箱桌面应用
开发环境:(1)开发工具:Visual Studio 201
-
计划运营管理系统
1.标准化项目信息，可视化展示项目经济指标、销售计划、项目计
-
小米系统开发
小米系统开发，主要工作内容为 1、维护小米全机型机器 2
-
智慧能源平台
此系统主要实现gis导航、站点管理、能耗监测、日志管理、告
-
Dcv-Proxima
Dcv-Proxima 是公司数据中心可视化的核心产品，主要
-
华为netEco
1 ：华为3D机房 是一款嵌入在华为NetEco系统中一款可
-
个人作品
主要是给客户呈现简单的3D化场景，根据不同的布局文件呈现不同
-
中心医院新城分苑管理系统
项目概述 1. 目标 - 基于Vue+Eleme
-
MIVCN
In the field of computer visio
-
科大讯飞脑PET比赛TOP5
nnUNet的出现，一棒子打死了近年来所有的新的网络结构。作
微信接收人才推送
关注猿急送微信平台，接收实时人才推送
接收人才推送
联系需求方端客服