ID：303012
Arvin
Python爬虫工程师
- 公司信息：
- 暂无
- 工作经验：
- 1年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 可工作日远程
- 所在区域：
- 广州
- 天河
技术能力
熟悉 numpy、pandas、matplotlib、sklearn 等数据挖掘的相关库
了解正则表达式、CSS、xPath 等数据解析库
利用 header、Cookie 等进行反爬虫
了解反爬虫(验证码破解、js 解密等)
了解 scrapy 爬虫框架、分布式爬虫
了解多线程多进程爬虫
了解网络编程 redis、mysql 等数据库的使用
了解 Linux 系统、搭建虚拟机，了解大数据的生态(Spark)
曾获奖项：Python 大数据应用开发中级职业技能证书
项目经验
Python实现爬取小说付费章节
1、利用 requests 库并添加请求头获取数据
2、利用 CSS 解析数据
3、使用官网的 SDK 将付费章节的图片识别为文字
4、将文字保存为 txt 文件
Python实现自动答题
1、使用 selenium 类自动打开目标网站
2、使用元素定位函数定位到题目
3、使用 parsel 第三方库和 CSS 解析数据
4、定位到答案后使用点击方法选择答题
5、并设置延时防止点击速度过快
案例展示
-
爬取B站视频
利用re正则表达式解析视频的URL地址，并构建翻页逻辑需要使用js解密，最后将mp3和mp4合成为音频
-
爬取B站视频
利用re正则表达式提取视频和音频的url地址，利用js逆向，构建请求参数并完成翻页逻辑，最后合成音频视频
相似人才推荐
-
600元/天后端开发python/java浙江云融创新科技有限公司概要：6年的python开发经验，熟悉web开发，爬虫，自动化开发，机器学习等。熟悉flask，fasta -
1000元/天高级工程师腾讯概要：• 丰富的后台开发架构经验和工程经验，主要使用：python, golang, c++做开发和交付。 -
500元/天Python爬虫工程师湖南九章智云科技责任有限公司概要：1.从事Python爬虫工作一年以上，熟悉大部分爬虫技术。 2.有一定的Django后端基础，熟悉
-
600元/天python开发工程师没有概要：熟练掌握**Tornado异步web框架**，对**异步非阻塞编程**有深刻认识，有良好的**编码规
-
700元/天高级python开发工程师百战程序员概要：python爬虫，web应用，app开发，办公自动化，数据分析 人工智能，前端框架，大数据软件，可
-
600元/天Python高级工程师三赢科技有限公司概要：1.熟练使用正则表达式和Xpath及Scrapy框架数据爬虫。 2.熟悉JavaScript,We
-
500元/天python开发金证股份有限公司概要：专业技能 . 性能: 精通 Jmeter,可针对系统瓶颈点，对症下药，对中间件、数据库、应用、系
-
1000元/天python全栈工程师无概要：男，20岁，在大学想找个兼职，减轻父母负担，洗完老板可以给一个机会，保准完成每一个任务，非常有耐心，
