ID:133400

徐大成

大数据软件工程师

  • 公司信息:
  • 南京宁特普数据有限公司
  • 工作经验:
  • 2年
  • 兼职日薪:
  • 500元/8小时
  • 兼职时间:
  • 下班后
  • 周六
  • 周日
  • 所在区域:
  • 南京
  • 全区

技术能力

1、spark程序编写,大数据数据过滤、统计、存储等
2、熟悉hbase、hdfs、kafka等常用组件
3、大数据集群维护(kerberos+openldap实现集群用户统一管理等)
5、java后端接口开发等(熟悉springboot等常用后端框架)

项目经验

1、流处理程序:使用spark streaming从kafka取数据,使用spark sql定时从mysql表加载规则,实现对数据的统计和过滤,最终发送到kafka
2、hbase value序列化存储的优化(减少存储的数据以及序列化/反序列化性能上的优化)
3、hbase协处理器代码的编写
4、cloudera集群维护(kerberos+openldap+sssd实现用户统一管理、cloudera集群升级)

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服