呆子的案例列表
实时财务重构指标计算系统
1.项目概况 实时财务重构指标计算系统是为亚马逊卖家提供商品，店铺实时日表和月表财务指标的实时数仓系统，经历了多个版本的迭代，从一开始的一小时延迟优化到现在的十分钟延迟。 该系统集数据采集，数据清洗与处理，数据挖掘，数据展示为一体，分为批处理和流处理两部分。 该项目包含4个分层： a.ods层（canal+sparkStreaming+hudi(实时,sqoop（离线）） b.dwd层（sparkStreaming+hudi） c.dws层（sparkStreaming+hudi,flink+hudi） d.ads层（sparkStreaming+hudi+mysql） ◆
用户行为分析系统
◆ 2018.10 - 2021.01 用户行为分析系统 ◆ 1.项目概况 用户行为分析系统是为拉卡拉易分期反欺诈提供大数据风控支持的系统，使得公司能够更好的获取用户，维护用户，建立用户画像进行用户分析，数据挖掘等功能。 该系统集数据采集，数据清洗与处理，数据挖掘，数据展示为一体，分为离线和实时两部分。 该项目包含4个子系统： a.实时数据处理系统（sparkStreaming+kafka+kudu+impala） b.大数据平台查询系统（dubbo+spring） c.机器学习与数据挖掘系统（spark ml+python） d.用户行为web系统（node.js+vu
案例判断参考
呆子的案例列表
实时财务重构指标计算系统
1.项目概况 实时财务重构指标计算系统是为亚马逊卖家提供商品，店铺实时日表和月表财务指标的实时数仓系统，经历了多个版本的迭代，从一开始的一小时延迟优化到现在的十分钟延迟。 该系统集数据采集，数据清洗与处理，数据挖掘，数据展示为一体，分为批处理和流处理两部分。 该项目包含4个分层： a.ods层（canal+sparkStreaming+hudi(实时,sqoop（离线）） b.dwd层（sparkStreaming+hudi） c.dws层（sparkStreaming+hudi,flink+hudi） d.ads层（sparkStreaming+hudi+mysql） ◆...
用户行为分析系统
◆ 2018.10 - 2021.01 用户行为分析系统 ◆ 1.项目概况 用户行为分析系统是为拉卡拉易分期反欺诈提供大数据风控支持的系统，使得公司能够更好的获取用户，维护用户，建立用户画像进行用户分析，数据挖掘等功能。 该系统集数据采集，数据清洗与处理，数据挖掘，数据展示为一体，分为离线和实时两部分。 该项目包含4个子系统： a.实时数据处理系统（sparkStreaming+kafka+kudu+impala） b.大数据平台查询系统（dubbo+spring） c.机器学习与数据挖掘系统（spark ml+python） d.用户行为web系统（node.js+vu...
