数据接入 ios/android/pc/h5 -> 日志服务器 -> Flume/logstash-> ODS 层(原始数据层) 出价/获胜/曝光/点击、adx 检索/点击、前端点击、精准扣费、黄金展位 实时 ETL 计算 Flink interval join 按业务主题进行流的 join, Redis 进行维度数据的缓存-> DWD 层(明细数据层) dsp-dwd 数据源 adx-dwd 数据源 落地页-dwd 数据源 其他多维明细数据 DWS 层(汇总数据层):根据业务需求,按照一个或者多个维度,选择一定粒度对 DWD 层明细数据进行汇 总计算,写入下
技术架构: Nginx-1.12.2+Flume-1.7.0+Kafka-0.11.0+Spark2.1.1 +Mysql-5.7.16+ZooKeeper-3.5.7+Hadoop-2.7.2
数据接入 ios/android/pc/h5 -> 日志服务器 -> Flume/logstash-> ODS 层(原始数据层) 出价/获胜/曝光/点击、adx 检索/点击、前端点击、精准扣费、黄金展位 实时 ETL 计算 Flink interval join 按业务主题进行流的 join, Redis 进行维度数据的缓存-> DWD 层(明细数据层) dsp-dwd 数据源 adx-dwd 数据源 落地页-dwd 数据源 其他多维明细数据 DWS 层(汇总数据层):根据业务需求,按照一个或者多个维度,选择一定粒度对 DWD 层明细数据进行汇 总计算,写入下...
技术架构: Nginx-1.12.2+Flume-1.7.0+Kafka-0.11.0+Spark2.1.1 +Mysql-5.7.16+ZooKeeper-3.5.7+Hadoop-2.7.2...
添加客服微信,免费为您安排与该工程师直接沟通
长按二维码添加客服微信
如该工程师当前档期不合,也可免费为您推荐相似候选人