基本信息

案例ID:215464

技术顾问:Camellia - 4年经验 - 北京东方国信股份科技有限公司

联系沟通

微信扫码,建群沟通

项目名称:采集系统-爬虫项目

所属行业:企业服务 - 数据服务

->查看更多案例

案例介绍

采集系统-爬虫项目
项目描述:
该项目是为了给集团大数据提供招标数据开发的爬虫项目,主要采用了selenium框架去实现对网站数据的获取、整理、存库,针对每个不同的网站进行定制化的开发爬虫代码,再通过定时任务获取一定时间段内的该网站的招标数据,大概有一千多个网站需要爬取其中的招标信息。
职责描述:
1、 主要负责其中的四百多个网站的爬虫代码开发,
2、 日常的项目部署工作和对接数据清洗的同事,根据数据清洗同事的意见修改开发的网站代码

相似案例推荐

其他人才的相似案例推荐

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服