数据接入 ios/android/pc/h5 -> 日志服务器 -> Flume/logstash->
ODS 层(原始数据层) 出价/获胜/曝光/点击、adx 检索/点击、前端点击、精准扣费、黄金展位
实时 ETL 计算 Flink interval join 按业务主题进行流的 join, Redis 进行维度数据的缓存->
DWD 层(明细数据层) dsp-dwd 数据源 adx-dwd 数据源 落地页-dwd 数据源 其他多维明细数据
DWS 层(汇总数据层):根据业务需求,按照一个或者多个维度,选择一定粒度对 DWD 层明细数据进行汇
总计算,写入下游 Kafka 中存储。
APP 层:APP 层的数据来自 DWD(明细数据层)和 DWS(汇总数据层),可用于实时多维分析、实时大
盘等(Clickhouse,Hbase,Redis)