ID：299443
___Martin丶屮
Python爬虫
- 公司信息：
- 中国采招网
- 工作经验：
- 2年
- 兼职日薪：
- 1000元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 所在区域：
- 北京
- 海淀
技术能力
1.熟练掌握 Xpath，Re，Requests，Selenium，Scrapy 等爬虫基本
库和框架。
2.熟悉 Mysql，Redis 数据库
3.熟悉 Django 框架，能够做基本的网页搭建 。
4.熟悉验证码的破解，如四六位验证码、滑块验证码等。
5.熟悉常见的反爬措施，如字体加密，动态数据，登录验证等，
6.有大型网站爬取经验，
7.了解常见的安卓逆向，App 自动化框架。
项目经验
航天电子采购平台
主要抓取网站中的招标采购信息，获取招标的时间，地址，招标要求，预算金额等信息。
1.前期的网站分析，明确爬取数据，设计爬虫模块，利用 XPath 提取技术进行数据
的提取
2.设计管道模块：对采集的 item 数据加入 MongoDB 数据库存储
3.中间件模块：针对反爬虫机制，通过设置 user-agent ，为爬虫添加 ip 代理池，设
置下载延迟等来应对
4.通过cookies进行模拟登录，获取网站数据
5.通过逆向获取post请求的动态数据，如时间戳，随机数，随机cookies等
6.采用多线程进行开发，有效提升爬取效率
相似人才推荐
-
500元/天Python研发工程师上海安捷力概要：1、3年 Python 开发经验。2年数据服务行业数据处理分析经验。 2、Python 熟练，擅长
-
700元/天python工程师无概要：专业python脚本开发。 各网页数据爬取，手机app资源获取，远程python及python工具
-
500元/天Python爬虫湖南逻辑教育科技有限公司概要：本人具备1年Python爬虫开发经验，熟悉Python编程语言，熟练掌握爬虫相关技术，包括reque
-
500元/天Python爬虫诚趣概要：Python爬虫，javasrapy，数据清洗，数据提取，数据保存，会一点数据库 mangodb m
-
500元/天python金牌讲师广西清之督教育发展有限公司概要：熟练使用MySQL数据库，熟悉Redis，MongoDB等NoSQL数据库； 熟练使用XPath、
-
800元/天Python工程师无概要：小团队，顶尖Python 精通JAVA C++等多类编程技术 团队中四人，团队中的成员均为计
-
500元/天Python工程腾讯概要：从事python开发相关工作已经4年，熟悉各种数据结构，对数据处理极为擅长，对python爬虫比较热
-
500元/天PHP开发, python开发以及爬虫南京凯奥思数据技术概要：主要以后端开发为主, 也可前端开发(js, jquery, vue, html, css), 后端主
