1.多年数据仓库设计与搭建经验
2.多年大数据平台建设经验,擅长大数据ETL,统计分析相关工作。熟悉spark,hive,hadoop, elasticsearch等大数据生态系统的工作原理及应用开发
3.多年java后端开发,熟悉原生java多线程,oop/aop编程,熟悉基于dubbo, spring boot的微服务架构开发,
4.docker容器化开发
项目描述: 建设公司内部的智能创意dmp平台!提供广告创意标签管理,广告效果数据实时处理,数据分析洞察能力,构建广告创意画像
项目职责: 数据仓库的建模,数据存储方案设计,数据流处理功能开发
项目业绩: 1.使用mysql binlog和kafka流处理技术实时采集第三方电商平台回流的广告投放效果数据。数据存储在hdfs和elasticsearch,保证数据的健壮性,存储和计算的可扩展性。
1.基于elasticsearch提供sql查询能力,实时的广告创意标签交叉分析能力!为广告投放运营团队提供实时的广告效果洞察分析,提高广告投放ctr,roi等效果指标