10年工作经验,主要从事数据开发、ETL、数据仓库、大数据工作。
熟悉大数据Hadoop体系,从事游戏行业五年经验,搭建游戏行业数据仓库,基于hadoop、hive、spark、hbase。
熟悉传统数据仓库体系,如数据建模、任务调度、存储过程的编写,熟悉mysql、oracle数据库。
数据python编程,能够编写脚本,熟悉django框架,可以编写后端程序。
前端熟悉js、layui框架。
1、实时数据平台项目 技术经理
技术栈hadoop、flink、gbase
2、数据中台产品项目 大数据架构师
技术栈hadoop、spark、hive、python、airflow
3、游戏行业数据仓库建设 大数据开发
技术栈hadoop、hive、python
数据中台项目,基于大数据hadoop计算与存储能力,在此之前集成数据采集、数据建模、元数据管理等页面可视化操作平台。
游戏行业数据仓库建设,基于埋点数据,来源有游戏客户端、服务器端,实时采集到hadoop集群,使用hive进行离线建模计算,将计算好的结果给前台报表展示。本人主要后端数据开发工作,截图为前端页面,不涉及本人开发。