ID：300825
念一 身份已认证
爬虫工程师
- 公司信息：
- 恒大集团
- 工作经验：
- 1年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 可工作日远程
- 所在区域：
- 其他
- 全区
技术能力
精通Python爬虫，熟悉正则表达式、xpath提取页面元素（或者bs4、pyquery）、爬虫库requests、框架scrapy、selenium、能处理简单验证码、js逆向、解决常见表单加密、cookie加密等，能根据需求，处理常见的反爬，抓取数据
Python爬虫伪装中代理IP、UserAgent的熟练使用
Python与scrapyt-redis分布式爬虫的基本使用
Python操作Mysql数据库增删改查
Python爬虫多线程、异步协程操作
项目经验
爬取网易云音乐评论、歌曲、基于Selenium的12306自动刷票软件、基于Scrapy爬取伯乐在线网站存入mysql数据库、基于GradientBoosting模型的厦门市房价预测系统、爬取酷狗音乐、爬取腾讯视频、爬取拉勾网、爬取笔趣阁所有小说
案例展示
-
爬取网易云音乐
通过DOM断点破解网易云音乐表单数据params、encSecKey加密，利用execjs与python交互解决表单加密
-
创建线程池ip
爬取www.89ip.cn网址建立自己的代理ip池，并且过滤无效ip，将有效ip存入txt文件中，。
-
爬取笔趣阁小说
通过对页面分析，总结页面为动态数据，分析数据接口编写爬虫代码，进行多线程池创建爬取笔趣阁所有小说。。
相似人才推荐
-
1000元/天技术杭州概要：擅长 上位机，与设备/PLC通讯，Modbus，OPC，TCP，485，232通讯，有药机，印刷等工
-
500元/天后端开发工程师广州云趣信息科技有限公司概要：1、熟悉面向对象编程思想，了解 Java 数据结构/算法 2、熟悉使用 Maven 项目管理工具
-
500元/天后端工程师北京恒致通创科技有限公司概要：主要从事后端开发，熟练掌握java语言开发，各类主流框架，如springboot，springclo
-
1000元/天架构师浦发银行概要：1、熟悉 spring boot、cloud、dubbo、zookeeper、J2EE, Sprin
-
500元/天深度学习算法工程师珠海欧比特宇航科技有限公司概要：多省份地物分类展示平台 2022年10月01日 - 2022年12月01日 项目类型： Web
-
500元/天全栈开发工程师武汉星钰科技有限公司概要：具有扎实的Java基础，理解IO流，多线程以及集合 • 熟练使用Spring，SpirngMVC
-
500元/天学生无概要：掌握语言 C语言、java、python 掌握的框架 SSM、springboot、Djang
-
500元/天网络工程师河南久磐信息科技有限公司概要：熟悉 Linux 和Windows 操作系统 熟悉 Python、Java和C语言、php各类语言
