ID：129981
A孟辉A
大数据开发工程师
- 公司信息：
- 友友天宇
- 工作经验：
- 5年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 周六
- 周日
- 可工作日远程
- 可工作日驻场（自由职业原因）
- 所在区域：
- 北京
- 全区
技术能力
大数据系统架构;
Cloudera Hadoop 平台管理调优;
mapreduce编程,离线数据清洗，过滤的处理;
sparkSQL,HBase,Hive等组件;
擅长的语言java,scala,python
利用scrapy爬取互联网数据
项目经验
光大银行准实时KPI数据处理平台:
简介:针对业务关注的，时效性要求超越T+1的报表需求，如关键时点的核心存款、流动性报表等，实现报表数据的准实时计算
IDE:idea
应用语言:Java
测试环境:Cloudera Hadoop
应用技术:SparkStreaming+HDFS+kafka+flume+Hbase+hive+zookeeper
数据的处理流程:需要把业务数据抽取成文件，通过Flume把数据文件传给Kafka进行处理,然后被SparkStreaming的消费端消费，经过处理后保存入Hbase中
相似人才推荐
-
500元/天研发工程师大唐融合通信股份有限公司概要：本人从事开发工作目前五年 掌握数据库如下：SqlLite、MySql、Oracle、SqlServ
-
1000元/天项目经理东华软件概要：在公司期间担任项目经理，有丰富的项目经验。掌握spring，springmvc，hibernate，
-
1000元/天高级工程师典信科技概要：1. 熟悉java编程，7年java开发经验. 熟悉springMVC, mybatis, act
-
800元/天高级后台工程师启明星辰概要：1、5年python开发经验 2、熟练使用C/C++ 3、5年Linux 平台开发经验 4、W
-
1000元/天大数据工程师上海星红桉数据科技有限公司概要：三年JAVA后端工作经验，两年大数据工作经验。 主要从事后端业务系统，数据处理方面的开发。 技术
-
500元/天高级研发工程师信息安全上市公司概要：java语言mvc开发多年经验。 熟悉php，golang，perl，linux shell等后端 -
1000元/天儿童天堂刚刚呵护概要：他恍恍惚惚人人人风景区人人都能看见的人都会觉得我是最幸福最爱吃火锅🍲？我也想去看看我拍下照片给你们打 -
500元/天后端工程师，数据库设计AKL概要：拥有10年软件系统设计开发与运营的经验，主要擅长后台系统的设计、后台数据库优化。擅长运用开发语言AS
