ID:297129

Rudy 身份已认证

Python爬虫开发工程师

  • 公司信息:
  • 中电金信
  • 工作经验:
  • 2年
  • 兼职日薪:
  • 600元/8小时
  • 兼职时间:
  • 下班后
  • 周六
  • 周日
  • 可工作日远程
  • 所在区域:
  • 深圳
  • 宝安

技术能力

有3年以上爬虫开发经验,爬过facebook、Instagram、youtube、twitter、tiktok、豆丁、百度知道、微博热搜等多个平台的数据,熟悉网站加密参数的JS逆向、验证码识别、IP封禁等反爬和反反爬策略。

项目经验

点点/七麦数据平台爬虫
 申请相应的点点/七麦数据平台账号,通过抓包找到登录过程的请求,模拟登录请求获取登录cookie;
 部分请求(登录或取榜单数据时)有部分加密参数,需通过JS逆向破解请求URL中的加密参数(点点平台的k参数、七麦平台的analysis参数);
 生成账号cookie和每个请求的加密参数并挂上代理后发送请求,对响应回来的内容进行json数据解析;
 将各榜单的数据保存入库并生成对应的爬虫任务进行监控。

案例展示

  • 点点/七麦数据平台爬虫

    点点/七麦数据平台爬虫

     申请相应的点点/七麦数据平台账号,通过抓包找到登录过程的请求,模拟登录请求获取登录cookie;  部分请求(登录或取榜单数据时)有部分加密参数,需通过JS逆向破解请求URL中的加密参数(点点平台的k参数、七麦平台的analysis参数);  生成账号cookie和每

  • 豆丁文档上传功能

    豆丁文档上传功能

     创建Chome的webdriver(浏览器)对象,打开豆丁首页并从登录框中填写豆丁账号密码进行模拟登录;  登录成功后条状到文档上传页点击上传触发文件选择窗口弹出;  用win32库中FindWindow方法定位到window弹出的文件选择框,并从文件选择框定位到文件

查看案例列表(含更多 0 个案例)

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服