ID:143661

LAM

爬虫工程师

  • 公司信息:
  • 搜狐
  • 工作经验:
  • 2年
  • 兼职日薪:
  • 700元/8小时
  • 兼职时间:
  • 下班后
  • 所在区域:
  • 北京
  • 海淀

技术能力

浏览器模拟登陆;
js破解动态请求参数;
scrapy 爬虫框架熟练应用;
数据处理(包括Matplotlib绘图);
熟练应用Redis作为爬虫中间件,去重,缓存数据
熟悉 MongoDB、MySQL作为数据存储工具;

项目经验

网易云音乐歌曲、歌单、歌手、专辑、以及相似信息的全局抓取
通过 Python 模拟网易云 aes加密后的参数,请求js 文件分析的接口,最后部署 scrapy-redis+动态 ip 完成抓取
携程酒店信息实时抓取
用 execjs、PyV8模拟 js代码参数构造通过抓取接口完成房型房价实时抓取

相似人才推荐

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    1
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服