ID：387890
Simon
高级爬虫工程师
- 公司信息：
- 华为技术有限公司
- 工作经验：
- 3年
- 兼职日薪：
- 700元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 可工作日远程
- 所在区域：
- 厦门
- 全区
技术能力
- 熟练掌握Python、Scrapy、BeautifulSoup、Selenium等爬虫技术栈。
- 精通网络协议（HTTP/HTTPS）、数据解析（HTML/XML/JSON）及数据存储（SQL/NoSQL数据库）。
- 有分布式爬虫框架（如Scrapy Cluster、PySpider）的开发和运维经验。
- 熟悉数据处理和分析工具（如Pandas、NumPy、Spark）。
- 具备扎实的计算机网络、操作系统、并发编程等基础知识。
项目经验
- 设计并实现了一个高并发分布式爬虫系统，用于采集和处理超过1000万条网页数据，极大提升了数据采集效率。
- 通过实施代理池和请求随机化技术，成功解决了多个目标网站的反爬虫机制问题。
- 领导开发了一个实时数据监控系统，通过数据抓取和分析，为业务部门提供了精准的数据支持和决策依据。
案例展示
-
得物app价格监听
实时监听得物app各类产品的价格波动 当产品价格波动到达设定的范围时，立即通过微信方式通知 通知消息中附带产品的各项参数和价格 所有程序均部署在服务器并长期稳定运行
-
搜索引擎聚合
集合各类搜索引擎，可手动筛选设置搜索的关键词和搜索引擎种类 将搜索结果聚合整理，统一导出 可使用AI进行搜索结果的整理和分析
-
系统自动化脚本
在催收系统上实现自动导出客户数据、自动扣款、自动清除未读消息等操作 实现一键完成催收任务，一键导出所有结果和数据
相似人才推荐
-
1000元/天技术总监百度概要：1、熟悉c、C++、VB、C#、delphi、Java、python等语言； 2、使用过sqlse
-
1000元/天爬虫新维信息技术概要：编程语言：熟练掌握Python，熟悉C/C++、Java等语言（根据掌握情况选择提及）。 爬虫框架
-
500元/天python爬虫中级工程师重庆撼地数智科技有限公司概要：我是一名python中级爬虫工程师，目前是在职人员，会的技能有以下：1.能够解决常见的反爬问题，2.
-
600元/天AI算法工程师青岛云世纪信息科技有限公司概要：1、AI算法微调：熟悉pytorch框架、tensorflow框架、ussfc网络层、yolo网络层
-
500元/天unity开发工程师南京和瑞智能有限公司概要：1. 掌握C#.lua语言及面向对象编程同时了解面向过程，初步了解Python,JS，AI机器学习，
-
500元/天无无概要：在编程语言领域，我有着扎实且多元的技能储备。精通 C++，凭借其高效性能，完成过多个算法优化项目，显
-
500元/天技术文档工程师维卓致远医疗科技概要：做过前端开发及产品经理的工作，对开发语言有所了解，做过产品经理，对软件的运行逻辑比较了解。 目前做
-
500元/天高级工程师美团概要：1、我熟练掌握自然语言处理技术，能运用深度学习模型搭建文本分类、情感分析系统，准确理解和解析语义。
