数据开发4年数据仓库架构师2年,数据库技术支持工程师1年经验。
技术能力:
1.shell 运维自动化熟练。
2.数据仓库模型设计能力。
3.大数据批处理sql 调试优化。
4.hive,gbsae,pg,oracle等数据库使用。
某某服电商推荐平台:
1.技术架构设计搭建:hive+mysql实现大数据批处理。
2.业务实现:根据客户浏览数据,实现主动实时推荐相似商品,热卖商品,不同平台商品比价,产品周边生态产品推荐等数据推荐
数据仓库架构设计,分层分域的数据处理实现企业级数仓,实现企业的管理决策与生产成本控制,供应控制节约成本等目标。 hive,spark,flink,doris等技术栈应用在项目上,实时和离线均满足。
项目包括不同数据源的数据集成,数据处理,给算法投喂合适数据,实现对热点业务、服务、活动,急需有效检测的的分析等业务功能。