少帅
中级大数据工程师
- 公司信息：
- TCL实业有限公司
- 工作经验：
- 5年
- 兼职日薪：
- 1100元/8小时
- 兼职时间：
- 可工作日驻场（自由职业原因）
- 所在区域：
- 深圳
- 宝安
技术能力
参与大数据平台的搭建、数仓搭建、数据开发、存储过程、数据清洗、数据可视化开发；大数据组件：Hadoop + Hvie + Spark
+ Flink + Kettle + Spooq + Flume + Kafka + Rundeck + Redshift + PostgreSQL + Hbase。
项目经验
IoT产业-空调 数据开发
项目架构：
● 采用Hodoop + Hive + SparkSQL + Flume + Kafka + Kettle + Redshift + PostgreSQL
项目描述：
该项目与公司的IoT产业空调系统结合，开发基于大数据的大屏、报表展示，项目使用了Hive、
SparkSQL技术，结合Hadoop、Flume、Kafka、Kettle等大数据组件，完成了基于Hive的离线数仓开发。
项目职责：
● 参与需求评审，了解业务需求；
● 根据需求进行数据探查摸底；
● 使用Kettle采集Mysql业务数据库数据到Hdfs中；
● 基于Hive离线数仓开发，离线数仓分层为：ODS、DL、DW、DWS、ADS层，对ODS层数据进
行清洗、脱敏；以及对DW层事实表进行聚合计算，完成设备新增、累计、活跃、设备转化率、TopN等指标的开发以及相应的存过过程；
● AIoTEdit和Hvie整合实现即席查询；
● 使用Rundeck进行Hive离线数仓定时任务的调度。
案例展示
-
数据可视化
公司数据可视化案例的开发过程以及一些数据可视化案例的展示，主要是分析各设备的地区占比的情况，设备品类分布的情况等等指标的展示。
-
数据可视化
参与大数据平台的搭建、数仓搭建、数据开发、存储过程、数据可视化开发；大数据组件：Hadoop + Hvie + Spark + Flink + Kettle + Spooq + Flume + Kafka + Rundeck + Redshift + PostgreSQL +
相似人才推荐
-
500元/天后端开发江苏商互通技术有限公司概要：你好，我是一名3年后端的程序员，平时比较喜欢钻研后端技术，一周下来空余时间会锻炼2~3次，欢迎叨扰!
-
500元/天研发总监京颐科技概要：1、Java 基础扎实并具有良好的编码习惯，精通 JVM、JMM 模型以及 OOP 编程思想和常用的
-
500元/天后端开发华为概要：南京大学本硕，专业软件工程，熟悉java、python等编程语言，熟练掌握mysql数据库开发，有过 -
500元/天VR算法工程师北京乐步教育科技有限公司概要：负责或参与国家重点研发计划，国自然基金项目，陕西省部共建项目，江苏省双创人才项目等。涉及特征提取，三
-
800元/天资深软件开发唯品会概要：1、擅长 Java 后端及大数据相关技术开发及架构设计 2、熟悉Spring Boot、Sprin
-
500元/天大数据开发工程师北京源石云科技有限公司概要：1.有完整的数仓搭建及迭代开发经验（离线&实时） 2.理解HDFS分布式文件系统和MapR
-
1000元/天技术经理四川聚创医药有限公司概要：前端: jq,es6, react, react-native,vue,div,css,ionic
-
500元/天后端开发人员百战尚学堂概要：擅长springboot+mybatis，dubbo分布式 开发，熟练掌握nginx服务部署....
