ID:137206

罗亚军

大数据开发

  • 公司信息:
  • 用友
  • 工作经验:
  • 5年
  • 兼职日薪:
  • 1000元/8小时
  • 兼职时间:
  • 周六
  • 周日
  • 所在区域:
  • 上海
  • 全区

技术能力

大数据行业丰富的开发经验,熟悉主流的存储引擎比如HDFS,HBase,Kudu,Elasticsearch,Alluxio,Parquet等,熟悉主流的计算分析引擎比如Spark,MapReduce,Hive,Impala等,其他诸如消息队列Kafka、Zookeeper也均有实际使用经验。以上组件均有生产使用经验。

项目经验

中国联通自然人项目:
系统架构:
flume + kafka + storm + kudu + hbase + 规则引擎
系统描述:
通过flume将日志文件传输到kafka集群中,storm接收kafka的消息,对数据进行映射以及将数据转化为Json格式。然后解析Json,将符合条件的数据落入kudu或者hbase,有一些数据会通过kafkaBolt发送到kafka里,规则引擎接收这些数据进行规则匹配然后发送到storm里对这些数据落入kudu或者hbase。
负责内容:
主要负责kudu+hbase的技术支持。storm数据落地部分代码的编写。

其他项目:
技术栈:Kafka + SparkStreaming + Kudu + Hbase

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    1
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服