基本信息

案例ID:184972

技术顾问:Not enough $ - 4年经验 - 中信建投

联系沟通

微信扫码,建群沟通

项目名称:58 同城宝实时数仓 2.0

所属行业:生活消费 - 房产家居

->查看更多案例

案例介绍

数据接入 ios/android/pc/h5 -> 日志服务器 -> Flume/logstash->
ODS 层(原始数据层) 出价/获胜/曝光/点击、adx 检索/点击、前端点击、精准扣费、黄金展位
实时 ETL 计算 Flink interval join 按业务主题进行流的 join, Redis 进行维度数据的缓存->
DWD 层(明细数据层) dsp-dwd 数据源 adx-dwd 数据源 落地页-dwd 数据源 其他多维明细数据
DWS 层(汇总数据层):根据业务需求,按照一个或者多个维度,选择一定粒度对 DWD 层明细数据进行汇
总计算,写入下游 Kafka 中存储。
APP 层:APP 层的数据来自 DWD(明细数据层)和 DWS(汇总数据层),可用于实时多维分析、实时大
盘等(Clickhouse,Hbase,Redis)

相似案例推荐

其他人才的相似案例推荐

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服