ID:180449

Terry

爬虫架构师

  • 公司信息:
  • 深圳市随手科技有限公司
  • 工作经验:
  • 9年
  • 兼职日薪:
  • 500元/8小时
  • 兼职时间:
  • 下班后
  • 周六
  • 周日
  • 可工作日远程
  • 所在区域:
  • 深圳
  • 南山

技术能力

精通网络爬虫技术,代理IP切换,防爬虫策略,图片识别等相关爬虫功能
熟悉网络支付流程,如微信支付和支付宝支付
精通web一站式开发
精通JAVA开发,熟悉微服务架构开发,如spring cloud ,dubbo

项目经验

爬虫架构系统整体设计:
1.所有爬虫统一使用模板来配置,支持使用XML模板里进行程序开发
2.模板支持外部脚本依赖,目前支持java,js,groovy
3.模板可以继承,定义常量,局部变量,import,重写等常见程序设计模式
4.使用分层架构来使用设计爬虫系统
5.支持不同代理IP切换策略
6.支持防爬虫破解
7.支持分布式集群化部署采集
8.使用jenkis+docker进行自动化部署
涉及应用开发:社保,公积金,银联,运营商,电商,搜狗微信,黑名单等,简单或复杂爬虫都能使用

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服