ID:200225

จุ๊บ非黑牛魔王

大数据研发工程师

  • 公司信息:
  • 阿里巴巴
  • 工作经验:
  • 3年
  • 兼职日薪:
  • 500元/8小时
  • 兼职时间:
  • 可工作日驻场(离职原因)
  • 可工作日驻场(自由职业原因)
  • 所在区域:
  • 北京
  • 海淀

技术能力

精通Hadoop,Zookeeper,Hbase,Hive,Spark,Flink等大数据框架
对大数据框架的源码实现有一定的研究。
熟悉流批处理。
数据库:使用过 Hbase,Redis,Kudu,Mysql,MongoDB 。

项目经验

项目一:
使用 SparkSQL整合 Kudu实现对广告业务 数据分析
工作内容: 使用 SparkSQL将离线数据进行 ETL处理,将处理好的数据输出到 Kudu 中,后面根据业务需要对 Kudu的数据使用 SparkSQL来建表分析。 主要进行:ETL,省份地市统计,地域分布情况统计, APP分布情况统计。

项目二:
使用 Spark对某网站数据进行离线和实时处理
项目简介:
离线项目: 使用 Spark对某网站用户行为日志进行 ETL处理,处理 结果落地 在 HBase,并使用 Spark对接 HBase存储的日 志数据进行统计分析 实现功能: 各地区访问量统计分析 客户端访问分布情况统计分析
实时项目:
使用 SparkStreaming和 Redis的整合完成某网站订单 数据实时 统计分析 实现功能: 实时统计每天的总订单数 实时统计每天的总订单金额

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服