案例介绍
1.项目概况
实时财务重构指标计算系统是为亚马逊卖家提供商品，店铺实时日表和月表财务指标的实时数仓系统，经历了多个版本的迭代，从一开始的一小时延迟优化到现在的十分钟延迟。
该系统集数据采集，数据清洗与处理，数据挖掘，数据展示为一体，分为批处理和流处理两部分。
该项目包含4个分层：
a.ods层（canal+sparkStreaming+hudi(实时,sqoop（离线））
b.dwd层（sparkStreaming+hudi）
c.dws层（sparkStreaming+hudi,flink+hudi）
d.ads层（sparkStreaming+hudi+mysql）
◆ 2.我的责任
大数据平台架构设计、aws大数据平台组件兼容性测试、hudi源码改造、各个模块的通用性模块开发、帮助项目组成员提供开发方案和解决技术性问题、负责开发人员的代码检查工作，提供指导开发任务性能优化
案例图片
相似案例推荐
其他人才的相似案例推荐
-
超凡大师
一直从事php开发，有七八年工作经验了，开发的小程序公众号项
-
scrm后台管理
项目介绍: 该项目主要是为导购更好地服务消费者服务的。包括账
-
百川
百川（PC端、APP端） 项目描述：百川原名蔬果派，该系统
-
徙木生鲜平台
徙木生鲜是一家在生鲜上游to B领域进行独特创新的移动互联网
-
江楠鲜品
江楠鲜品APP是江南市场的网上商城软件快捷配送，应季蔬菜，无
-
互联网金融助贷平台-管理后台
该项⽬包含C端和B端，主要模式是将C端流量分层，将流量内部转
-
行业风向标2.0
1.项目描述：使用各类图表，从产品创新的角度出发，建立社媒、
-
倍市得CEM问卷-答题端
倍市得CEM问卷-答题端（上海众言网络科技有限公司） 1.
-
PaaS低代码开发工厂
公司从SaaS企业网PaaS上进行转型, 将SaaS能力进行
-
Loadrunner之参数关联
首先对做性能测试的功能进行录制接口脚本，录制完成后进行回放，
-
上海钻石交易所
上海钻石交易所 独立负责与各方沟通需求，并为企业重新进行行
-
智慧仓库
项目简介:为冷链仓库的工作人员展示出设备的温湿度，电量状态等
微信接收人才推送
关注猿急送微信平台，接收实时人才推送
