ID:222132

小新ing

爬虫工程师

  • 公司信息:
  • 工作经验:
  • 1年
  • 兼职日薪:
  • 500元/8小时
  • 兼职时间:
  • 周六
  • 周日
  • 所在区域:
  • 厦门
  • 全区

技术能力

熟练掌握python的基本语法,对面向对象思想有一定的了解,
掌握常见的爬虫、反爬虫知识及应对措施,
熟练使用python lxml、BeautifulSoup、re、json模块进行数据提取,
熟悉Xpath语法规则和各CSS、Selector的使用,
掌握scrapy框架、以及编写各类中间件,
英语四级,具有一定的英文文档阅读能力和翻译能力。

项目经验

-百度云盘爬虫。
-社交数据爬虫。支持微博,知乎,豆瓣。

-Python爬虫代理IP池(proxy pool)。

-爬取慕课网视频。

-中国知网爬虫。

-动态IP解决新浪的反爬虫机制,快速抓取内容。

-爬取CSDN上的博客文章。

-爬取西刺上的代理IP,并验证代理可用性

案例展示

  • 爬虫代理IP池

    爬虫代理IP池

    爬虫代理IP池项目,主要功能为定时采集网上发布的免费代理验证入库,定时验证入库的代理保证代理的可用性,提供API和CLI两种使用方式。同时你也可以扩展代理源以增加代理池IP的质量和

  • scrapy拉钩数据采集

    scrapy拉钩数据采集

    用scrapy框架爬取拉勾网数据,获取该网站中城市、公司名、公司规模、学历、职位名称、薪资、工作时间的所有数据,能够为岗位提供数据参考。

查看案例列表(含更多 0 个案例)

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服