ID:381945

淡定超

大数据开发

  • 公司信息:
  • 深圳市天源迪科-成都分公司
  • 工作经验:
  • 7年
  • 兼职日薪:
  • 500元/8小时
  • 兼职时间:
  • 可工作日驻场(离职原因)
  • 所在区域:
  • 成都
  • 成华

技术能力

熟悉Python,熟悉相关爬虫库:request,beautifulsoup, urllib,pandas库,能进行数据预处理。
精通SQL。
熟练掌握Hadoop各组件及原理。
熟悉Spark流批一体计算框架,core(RDD)、sparkSQL、sparkStreaming组件。

项目经验

一、物联网数据仓库搭建
从0搭建CDH大数据平台,梳理业务数据设计数仓分层结构。
二、时空大数据项目
四川省基站用户位置数据处理,开发相关应用或场景下的结果表;百度地图数据爬取,包括经纬度,所在地市,类别。

案例展示

  • 数据应用开发

    数据应用开发

    工作内容主要是数据开发相关包括使用大数据组件开发报表、搭建数仓、数据爬虫爬取并预处理数据等,因数据保密性不方便展示数据结果。展示爬取的部分地图数据结果。

  • 数据爬取

    数据爬取

    某地图平台用python脚本爬取并处理后的标签数据展示,脚本可固化。。。。。。。。。。。。。。。。。。。。。。。。

查看案例列表(含更多 0 个案例)

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服