ID:194572

灞波儿奔波儿灞

高级应用软件工程师

  • 公司信息:
  • 浙江大华
  • 工作经验:
  • 8年
  • 兼职日薪:
  • 1000元/8小时
  • 兼职时间:
  • 下班后
  • 周六
  • 周日
  • 可工作日远程
  • 所在区域:
  • 杭州
  • 滨江

技术能力

5年软件开发经验
3年大数据和分布式领域开发经验
编程语言
熟悉: • C • C++ • Java • Shell
了解: • Go • Scala • Python
软件
熟悉: • Linux • Hadoop

项目经验

数据处理任务调度模块: 为了协调各数据处理任务(MapReduce/Spark)的执行顺序,我调研了Oozie,借鉴其DAG 的思路,开发
了这个任务调度模块,集成到已有的数据处理和报表系统中。该模块使任务能够按依赖关系执行,不需要再通过定时指定顺序。

用户打分模型Workflow:根据用户每天使用app 和广告曝光点击等行为数据,按规则对其打分评价优劣,月末汇总整月行为再算
总分。一个月的原始数据量约30T,Workflow 每天在30 分钟内完成所有计算、入库和报表输出。

用户昼夜常驻位置挖掘:为支持业务方做用户的生活/工作场所画像,需要挖掘用户一年内每天的昼夜常驻位置,原始数据量约
600T。抽样发现用户的位置轨迹中存在异常点需要排除,因此我设计了一种稳定停留点的计算方法来进行过滤。

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服