网站爬取
- 合作方式：
- 时间制 全国远程
- 预估日薪：
- 500
- 预估总价：
- 500元
- 预估工时：
- 1天
- 所在区域：
- 全国远程
需求描述
一、需求文档
1、爬取网站清单提供
二、项目要求
1、使用Scrapy 2.1.0编写
2、item文件的提交字段，按照我们的要求定义和提交
3、pipeline和spider里面的主要功能函数跟我们保持一致
4、类名、函数名、变量名清晰且符合规范
5、需要能够通过配置控制爬取该网站近几天的数据或者某日期的数据
5、日志记录清晰和全面
6、配置文件需要加上注释
三、交付成果
1、项目的所有文件
2、项目的使用说明
3、测试爬虫可用的测试操作
相似职位推荐
-
Teamcity build steps 配置总价：500元概要：有几个项目需要配置，需熟练使用teamcity, 了解CI/CD流程，和远程部署。 使用语言框
-
社交媒体数据分析师总价：9800元概要：工作内容 1. 收集和处理社交媒体的消费者行为与商业数据的价值数据（如微博，小红书，大众点评，Fa
-
【已重置】总价：1000元概要：【已重置】
-
开发流媒体总价：12500元概要：想开发，视频，直播功能的软件，具体电话沟通吧，问题太多了，描述我怕说的不完善。
-
生信工程师总价：500元概要：1. 用python实现一篇文献中的算法 2. 讲解一下这个算法 3. 涉及机器学习和深度学习
-
【已重置】总价：15000元概要：【已重置】
微信客服
需求方请加需求方端客服沟通需求，工程师请加工程师端客服浏览推送职位
需求方端客服
工程师端客服