ID:266334

数据开发工程师

  • 公司信息:
  • 南京烽火科技
  • 工作经验:
  • 5年
  • 兼职日薪:
  • 500元/8小时
  • 兼职时间:
  • 下班后
  • 周六
  • 周日
  • 所在区域:
  • 南京
  • 全区

技术能力

1、熟悉掌握java、熟悉linux系统常用命令,shell脚本编写
2、熟悉python编程
3、熟悉数据仓库
4、熟悉阿里云、aws
5、熟悉hadoop、hive、impala、spark等大数据组件
4、熟悉各种etl处理工具,如kettle,sqoop等

项目经验

1、使用python爬取互联网数据,并对数据进行结构化处理并导入到关系型数据库
2、使用大数据组件处理分析非结构数据与结构化数据
3、使用java语言,spring boot开发框架搭建后台开发项目

案例展示

  • 非结构化处理平台

    非结构化处理平台

    非结构化数据分析系统,主要用于将非结构数据通过数据探测,数据分类,阵地快提,数据落地,数据入库,PDF提取,HTTP提取等方式变成结构化的阵地数据输出,并与数仓进行对接,为下游业务贡献数据 项目职责: 1.对接数据入库模块,对入库的HDFS文件进行解析,清洗,数据输出到HIV

  • 电商数仓

    电商数仓

    负责数仓的分层和一些 DWS、ADS 常用指标的分析。比如流失用户数,最近连续三天活跃用户,最近七天内连续三天活跃用户等。流失用户数就是最近七天未登录的用户,将日活表按照 id 分组,然后取出该 id 对应的最大时间,判断是否为最近的七天得到最近七天未登录的用户然后计数。连续三天

查看案例列表(含更多 0 个案例)

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服