ID:350646

唐峻

java高级开发工程师

  • 公司信息:
  • 深圳华为技术有限公司
  • 工作经验:
  • 2年
  • 兼职日薪:
  • 600元/8小时
  • 兼职时间:
  • 下班后
  • 周六
  • 周日
  • 可工作日远程
  • 可工作日驻场(自由职业原因)
  • 所在区域:
  • 深圳
  • 龙岗

技术能力

1.有2年数据抓取开发经验
2.熟练掌握 python 编程语言,具有扎实的编程基础和良好的代码风格,
3.精通 python 编程语言,熟悉爬虫原理,常见的反爬虫技术和 cookie 的登录原理,具备丰富的爬虫开发经验,熟悉 scrapy,selenium 等开发框架
4.熟悉 html,css,javascript 等前端知识,掌握 web 界面的分析方法,熟练掌握 xpath ,正则等其中几种常用的信息抽取技术,具备良好的数据清洗和处理能力;

项目经验

爬虫与数据分析项目(python)
根据需要爬取的数据进行需求分析,分析目标网站的网站结构和一些反爬手段,通过requests、scrapy、scrapy-redis、xpath等技术手段编写爬虫程序进行内容抓取
对抓取到的数据进行清洗过滤,结构化存到数据库,根据爬取过程中遇到的一些反爬手段,优化自己的程序对爬取到的数据,通过matplotlib生成直方图、条形图、散点图、饼图、词云等,多维度展示分析数据,并撰写数据分析报告,供需求方对数据有直观的了解使用python开发的51商城、BBS问答社区,智能停车场车牌识别计费系统,微信小程序如
看图猜成语小程序、今天吃什么小程序

案例展示

  • 综合信息爬虫

    综合信息爬虫

    爬取过的网站: 国外:Auction,BrandAuc,Ecoauc,Komehyo,Mekiki,Mercari,Starbuyers,Yahoo,洛杉矶房价信息。 国内:1688,Arrow,Datasheet,findic,华强,IC交易网,IC现货,德州仪器,安世,恩

  • 评论数据爬取

    评论数据爬取

    某小破站弹幕评论数据爬取 利用aiohttp进行数据爬取(经过几次优化减少请求次数,优化爬取速度) 再用pyopenxl进行表格存储(客户要求存表格) 将up主为文件夹, 视频为xlsx, 弹幕、评论分别存个sheet

  • 星辰运维开发平台项目

    星辰运维开发平台项目

    星辰运维开发平台项目是一个大型综合运维开发平台, 包含cmdb,监控告警,流程管理,权限管理,集成发布等功能的综合平台。告警级别分为5个级别,每个级别都有不同的严重程度,不同程度会发送钉钉,*,和短信,和语言等区分。长时间未处理的会进行告警升级,提交给领导等。Cmdb则是包括服

查看案例列表(含更多 0 个案例)

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服