ID:249485

💭浠

爬虫工程师

  • 公司信息:
  • 维涛信息技术公司
  • 工作经验:
  • 2年
  • 兼职日薪:
  • 500元/8小时
  • 兼职时间:
  • 下班后
  • 周六
  • 周日
  • 可工作日远程
  • 所在区域:
  • 广州
  • 白云

技术能力

python
网络协议:一些列的协议,http协议
html,css,javascript,jquery 基本的web技能
数据的存储(数据库)
爬虫的相关框架 scrapy , pyspider 包 requests urllib
网页分析工具:正则表达式,xpath ,bs4......

项目经验

1、【WechatSogou】- weixin公众号爬虫。基于weixin公众号爬虫接口,可以扩展成其他搜索引擎的爬虫,返回结果是列表,每一项是公众号具体信息字典。

2、【DouBanSpider】- douban读书爬虫。可以爬下豆瓣读书所有图书,按评分排名依次存储,存储到Excel中,比如筛选评价人数>1000的高分段书籍;可依据不同的类别存储到Excel不同的分类 ,采用User Agent伪装为浏览器进行爬取,并加入随机延时来更好的模仿浏览器行为,避免爬虫被封。

3、【zhihu_spider】- zhihu爬虫。爬取zhihu用户信息以及人际关系,爬虫框架使用scrapy,爬取的数据存储使用mongo

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服