ID：341607
星
高级爬虫
- 公司信息：
- 国能
- 工作经验：
- 5年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 所在区域：
- 北京
- 海淀
技术能力
1、本科及以上学历，计算机相关专业，3年以上网页及APP数据采集经验；
2、熟悉爬虫原理，分布式架构，精通一种开源爬虫框架及原理，熟悉主流爬虫技术，如协议破解、脱壳、模拟点击、AST解混淆等，能够解决封账号、封IP、验证码等问题；
3、熟悉Go/Python任意语言,熟悉MySQL，Redis等；
4、熟悉Selenium/Puppeteer/PhantomJS至少一种工具的使用。
5、熟悉xpath/正则表达式/代理池等爬虫相关技术；
6、具有良好的沟通和团队协作能力，具备良好的数据基础，工作条理清晰，善于学习。
项目经验
1、负责网页及APP页面解析和结构化抽取，数据清洗、海量数据存储和读取等；
2、负责抓取数据的深度提取和挖掘；
3、负责维护和优化爬虫程序，实时监控爬虫与警报反馈；
4、探索和研究高效的数据抓取和存储解决方案；
5、参与研究策略优化，提升抓取效率和质量。
案例展示
-
boss直聘
1、本科及以上学历，计算机相关专业，3年以上网页及APP数据采集经验； 2、熟悉爬虫原理，分布式架构，精通一种开源爬虫框架及原理，熟悉主流爬虫技术，如协议破解、脱壳、模拟点击、AST解混淆等，能够解决封账号、封IP、验证码等问题； 3、熟悉Go/Python任意语言,熟悉My
-
社交应用App爬虫
1. 设计、开发并维护现有的网络爬虫系统，以支持公司的数据采集需求。 2. 实现网页内容的自动抓取和解析，处理各种网络异常、JS 逆向、验证码破解 和反爬虫机制等。 3. 对抓取的数据进行清洗、去重和结构化处理，保证数据质量。 4. 持续监控爬虫系统的运行状态，及时调整策
相似人才推荐
-
500元/天大数据开发高级工程师大汉电商概要：技能应用： 熟练掌握Java编程语言，熟悉Spring Boot、MyBatis等主流框架。 熟
-
500元/天学生无概要：拥有熟练掌握Vue.js 2和Vue.js 3，能够利用它们进行JavaScript和HTML的开发
-
500元/天世界著名网络大屎暂无概要：本人是一个在校生想通过这个平台接一些单，现在就是先注册一个账号关于技术问题只会一点点爬虫之类的哈，往
-
1000元/天plc工程师山东硕鑫自动化技术有限公司概要：西门子s7-200、s7-200smart、1200、1500过程控制与运动控制，汇川H5u、AM6
-
1000元/天c/c++,c#高级工程师不公开概要：熟练掌握c/c++/c#语言！ 熟练掌握客户端程序开发：winform, wpf, mfc, qt
-
500元/天学生福建师范大学概要：目前研一学生，统计学图像识别方向，22岁 掌握Python数据爬取，数据分析和可视化，目标检测图像
-
500元/天算法工程师某研究院和大厂概要：能够使用深度学习模型（如 CNN、BiLSTM、GRU、Transformer、BERT、PGN、C
-
500元/天爬虫工程师贵州贝思特智能科技有限公司概要：负责设计开发分布式网络爬虫系统，进行多平台信息抓取和分析工作； 根据业务需求，实现大规模文
