ID：151393
天明
高级软件工程师
- 公司信息：
- 百世
- 工作经验：
- 4年
- 兼职日薪：
- 1600元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 可工作日远程
- 所在区域：
- 杭州
- 滨江
技术能力
拥有4年的大数据开发经验，负责 原平台中Hadoop的任务向spark的转型。
Hadoop的开发经验 4年
spark的开发经验 2年
熟练使用 hive、zeppelin 等开发工具进行数据校验、查看等
用实时的flink的任务开发
优化原Hadoop平台的任务，调整逻辑代码 优化mapper个数 降低资源20%。
在spark的开发中，推动架构升级，从原来的1.6 升级到2.3.
job的优化经验丰富
项目经验
大数据平台 etl数据抽取合并整理
spark 上百个job的开发、优化、调试
大数据工具类的开发
专门为BI部门提供 种类繁多的报表
有 离线统计的 数据 和 实时程度到秒级别的实时报表
有 通过 nifi 完成 近实时的数据抽取工作，保证hdfs上能否拥有近实时的数据 供 spark、Hadoop的任务 读取，提供数据读取基础。
相似人才推荐
-
600元/天研发中兴概要：tcp/ip，http协议，c/c++，jave、c#，python，应用逆向, tcp/ip，h -
500元/天系统工程师深圳市傲天科技股份有限公司概要：具备IT运维服务及WINDOWS/LINUX、数据库、应用系统的运维经验，熟悉windows/Lin
-
500元/天软件开发工程师恒锐科技概要：1.精通Java面向对象编程语言，良好的编码习惯； 2.精通HTML和AJAX； 3.熟练使用J
-
500元/天工程师上海中云数据公司概要：1、熟悉使用python语言 2、使用scrapy框架爬虫 3、熟悉前端h5、css，js，了解
-
500元/天软件工程师厦门亿联网络技术有限公司概要：熟练掌握C/C++编程语言，熟悉基本设计模式。 有嵌入式软件开发的相关经验，擅长网络编程，熟悉常用
-
500元/天高级数据采集工程师苏州德融嘉信概要：大二开始学习java，大三开始进行java web端开发做过几个b/s端项目，熟悉前端html aj
-
500元/天资深DevOps欧特克(中国)软件研发公司概要：拥有大学英语4级、6级和上海市口译证书。 同济大学本科计算机科学与技术专业。 拥有RHCE认证。
-
500元/天爬虫工程师山西精英科技股份有限公司概要：熟悉python语言，熟悉面向过程和面向对象的编程思想 熟练使用requests库和scrapy框
