案例ID:200813
技术顾问:avern - 2年经验 - 惠丰钻石科技股份有限公司
联系沟通
项目名称:51job招聘信息爬取以及详情页数据采集
所属行业:企业服务 - 数据服务
项目描述:根据公司需求,爬取 51job 的职位数据,设计反反爬方案。 责任描述: 1. 分析当前网站逻辑,定位采集全站列表页职位数据 2. 分析 js 逻辑,断点调试,解析 cookies 参数。 3.针对网站的反爬措施提供解决方案; 4.使用Xpath,re等技术来定位数据,提取有效内容; 5.使用MongoDB进行信息存储,对异常进行相应处理。
其他人才的相似案例推荐
这是一个旨在服务大型企业内部项目管理/人员管理的OA产品,由
万能表单系统,支持自定义配置表单模型,表单分为问卷类型和考试
参加产品研讨会,理解需求,百分百还原设计稿页面效果,开发对应
项目描述: 使用最新的vue3、springBoot技术作
该项目是石油公司为统计各地的挖井数量以及上报各地的挖掘情况,
运用大数据、云计算、区块链、物联网、人工智能等技术手段,建立
个人作品 一、业务介绍 优化采购流程使得采购流程变得
我是一位负责数据安全管理平台的技术经理,我们的平台提供全面的
本项目中我负责项目全流程开发及交付的工作,具体内容如下:
•维护公司服务器系统,如数据库,网站,AD,系统监控,DNS
• 安装、部署、维护、迁移Sharepoint服务器、数据库
航班动态列表页面主要分为进出港航班列表信息、即将进出港航班列
企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才
关注猿急送微信平台,接收实时人才推送