ID:272001

Major.周

爬虫工程师

  • 公司信息:
  • 创业公司
  • 工作经验:
  • 2年
  • 兼职日薪:
  • 500元/8小时
  • 兼职时间:
  • 下班后
  • 所在区域:
  • 广州
  • 海珠

技术能力

1.熟悉Python、计算机网络,熟悉使用多线程,熟悉Scrapy等常用爬虫框架;
2.熟悉Linux操作、正则表达式、Mysql、MongoDB、Redis等常用数据库及缓存;
3.能解决封账号、封IP、验证码识别等问题。

项目经验

1.大众点评数据采集项目:开发大众点评爬虫脚本,采集16个城市人均100元以上的日料店基本信息,字段包括店铺名称、评价数、人均消费价格、推荐菜、团购优惠、店铺评分、地址、营业时间等,在开发大众点评爬虫脚本时,需要解决字体反爬、IP封禁、Cookie加密等问题,最后成功采集到了16个城市的上万条数据。
2.链家网数据采集项目:开发链家网爬虫脚本,采集北上广深各个小区的房价、户数等信息,在过程中需通过多线程的方式来提高爬虫效率,最后成功采集上万条小区数据

案例展示

  • 大众点评数据采集脚本

    大众点评数据采集脚本

    大众点评爬虫脚本,将大众点评相关店铺信息数据抓取后进行清洗并存入数据库中,店铺信息包括但不限于店铺名称、评分、人均消费、评论等

  • 链家网爬虫脚本

    链家网爬虫脚本

    链家网多线程爬虫脚本,抓取各城市小区的基本信息,包括但不限于小区名称、房价、栋数、户数等,将基本信息清洗后以excel文件形式导出

查看案例列表(含更多 0 个案例)

相似人才推荐

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服