boss直聘

社交-IM熟人社交

1、本科及以上学历,计算机相关专业,3年以上网页及APP数据采集经验; 2、熟悉爬虫原理,分布式架构,精通一种开源爬虫框架及原理,熟悉主流爬虫技术,如协议破解、脱壳、模拟点击、AST解混淆等,能够解决封账号、封IP、验证码等问题; 3、熟悉Go/Python任意语言,熟悉MySQL,Redis等;...

boss直聘
boss直聘
boss直聘

社交应用App爬虫

社交-陌生人社交

1. 设计、开发并维护现有的网络爬虫系统,以支持公司的数据采集需求。 2. 实现网页内容的自动抓取和解析,处理各种网络异常、JS 逆向、验证码破解 和反爬虫机制等。 3. 对抓取的数据进行清洗、去重和结构化处理,保证数据质量。 4. 持续监控爬虫系统的运行状态,及时调整策略以应对网站结构变化。...

社交应用App爬虫
社交应用App爬虫
社交应用App爬虫
------ 加载完毕 ------
联系需求方端客服