ID:271859

道清静 身份已认证

python爬虫工程师

  • 公司信息:
  • 正海有限公司
  • 工作经验:
  • 2年
  • 兼职日薪:
  • 500元/8小时
  • 兼职时间:
  • 可工作日驻场(自由职业原因)
  • 所在区域:
  • 北京
  • 海淀

技术能力

我熟练掌握Python编程语言及其相关的库和框架,如requests、Beautiful Soup、Scrapy等。我可以使用这些工具来发送HTTP请求、解析HTML/XML、提取所需的数据,并将其存储到数据库或文件中。
我熟悉各种爬虫技术,包括网页爬取、API调用、动态页面渲染、验证码处理、登录认证等。我可以使用适当的技术和策略来处理不同类型的网站和数据源。
我具备良好的数据清洗和处理能力,可以使用正则表达式、XPath、CSS选择器等工具来提取和清洗数据,使其符合需求和标准。
我熟悉常见的数据存储和处理工具,如MySQL、MongoDB、Redis、Pandas等。我可以将爬取到的数据存储到适当的数据库中,并进行数据清洗、转换、分析和可视化。
我注重代码的可维护性和可扩展性,编写结构清晰、模块化的代码,采用最佳实践和设计模式,以确保代码的质量和可靠性。
此外,我具备良好的问题解决能力和自主学习能力,可以独立解决遇到的技术问题,并持续关注新技术和行业动态,以保持自己的技术竞争力。
总而言之,作为一名Python爬虫工程师,我具备全面的爬虫技术能力和数据处理能力,可以高效地从互联网上采集、清洗和处理数据,为业务和决策提供有价值的信息和洞察。

项目经验

web平台的有抖音的评论,直播,验证码的逆向,bilibili的点赞评论和弹幕,wb的评论和点赞等等
app端的有得物的商品价格信息、bilibili的点赞评论播放量,京东的抢单,之类的

案例展示

  • 一品威客

    一品威客

    暂时只实现登录功能,获取基本数据,js逆向工作,python代码实现,逻辑结构的封装数据采集,web逆向

  • get_music

    get_music

    qq音乐的下载实现,搜索关键词下载歌曲,网页版的逆向,python功能实现,js逆向分析,就是代码转python代码设计,逻辑实现

  • get_music

    get_music

    qq音乐的下载实现,搜索关键词下载歌曲,网页版的逆向,python功能实现,js逆向分析,就是代码转python代码设计,逻辑实现

查看案例列表(含更多 0 个案例)

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服