ID:265647

Urmiooᯤ²ᴳ

JAVA软件工程师

  • 公司信息:
  • 亚信科技
  • 工作经验:
  • 10年
  • 兼职日薪:
  • 500元/8小时
  • 兼职时间:
  • 下班后
  • 周六
  • 周日
  • 可工作日远程
  • 所在区域:
  • 长沙
  • 全区

技术能力

爬过各大新闻内容,如:网易、新浪、澎湃、搜狐等等;
后台编码模拟各大新闻网站的登陆发帖点赞操作;
爬过新浪微博、facebook、twitter;
爬过工商网所有工商数据、天眼查、企查查等;
爬过菁优网、橡皮网题库;
爬过高考录取招生数据,如中国教育在线/优志愿/计桥/阳光高考等;
爬虫经验丰富,有实力解决各种爬虫封锁限制,包含JS加密破解、APP反编译等;
独立完成过后台爬虫管理系统(前端后台数据库一个人全部做完)。

项目经验

在公司担任爬虫开发工程师。曾设计开发公司的爬虫管理平台,分布式爬虫的开发,新闻通用爬虫的开发。
能够针对客户和领导的需求设计开发适合当前工作场景的爬虫,对分布式爬虫,定时自动化爬虫有比较深刻的理解。
有大规模数据抓取的经验,能够解决大部分生产中遇到的爬虫技术难点。
熟练掌握selenium+phantomjs爬虫开发工具,能够解决分布式爬虫,验证码,封ip,需要登录,滑动验证码等反爬手段
数量掌握scrapy爬虫框架,celery异步调度框架,熟悉kafka消息队列

案例展示

  • 科研平台

    科研平台

    针对传统临床科研工作中数据获取与数据处理的痛点,我们设计了医疗科研平台,以提供科研数据获取的效率,丰富科研数据分析的方法,帮助对医院科研课题一体化管理,降低人力要求及时间消耗。 科研平台担任开发经理角色,协调产品与研发之间的工作。科研平台

  • 信息采集系统

    信息采集系统

    公司信息采集系统,分为日常和临时采集两部分。 各大新闻内容,如:网易、新浪、澎湃、搜狐等等; 后台编码模拟各大新闻网站的登陆发帖点赞操作;

查看案例列表(含更多 0 个案例)

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    2
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服