ID:274858

Daniel M·🇨🇳

软件测试

  • 公司信息:
  • 文思海辉
  • 工作经验:
  • 7年
  • 兼职日薪:
  • 500元/8小时
  • 兼职时间:
  • 下班后
  • 周六
  • 周日
  • 所在区域:
  • 北京
  • 海淀

技术能力

1、测试技术:包括测试工具的使用(postman, soapui等)自动化技术:python自动化,网页自动化,接口自动化
2、爬虫技术:包括scrapy框架的使用,requests库,beautifulsoup, 数据库链接

项目经验

项目1:
负责根据需要爬取的数据进行需求分析,分析目标网站的网站结构和一些反爬手段;
负责通过requests、scrapy、xpath等技术手段编写爬虫程序进行内容抓取,对抓取到的数据进行清洗过滤,分表存储,以供其他部门使用;
项目2:
根据业务需求,实现大规模文本、图片数据抓取、清洗、存储等工作;
根据业务需求通过抓包技术,包括代理、selenium、验证码处理等

案例展示

  • 租房网爬虫

    租房网爬虫

    此作品为租房网的爬虫的项目,主要用到的是scrapy框架,具体的技术用到了验证码识别,数据库连接,ip代理设置 scrapy框架包括spider, items, downloadware, middleware, 几个主要的组件

  • 淘宝爬虫

    淘宝爬虫

    淘宝爬虫,运用scrapy框架爬取商品信息,包括连接以及价格等,主要运用验证码识别,数据库连接。 中间处理数据的组件可配置

查看案例列表(含更多 0 个案例)

评价列表

该用户已被预约 1 次,预约方未评价,系统默认 5星 好评。

相似人才推荐

信用行为

  • 接单
    1
  • 评价
    0
  • 收藏
    0
  • 五星率
    100%
  • 退款
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服