联想IUOP(Intelligent User Operation Platform)是一个基于离线数仓的用户行为分析平台,旨在整合全球用户数据,构建360°用户画像,支撑精准营销、用户分群和个性化推荐。 我的核心贡献: 数据架构设计: 采用 ODS→DWD→DWS→ADS 分层架构,基于 Kimball维度建模 设计用户行为、设备、交易等核心主题域,确保数据一致性。 引入 Hudi 实现增量更新,提升用户标签的实时性,减少全量计算资源消耗。 ETL优化与性能调优: 使用 Spark SQL + Hive 处理日均 TB级 用户行为日志,优化 JOIN倾斜(
联想IUOP(Intelligent User Operation Platform)是一个基于离线数仓的用户行为分析平台,旨在整合全球用户数据,构建360°用户画像,支撑精准营销、用户分群和个性化推荐。 我的核心贡献: 数据架构设计: 采用 ODS→DWD→DWS→ADS 分层架构,基于 Kimball维度建模 设计用户行为、设备、交易等核心主题域,确保数据一致性。 引入 Hudi 实现增量更新,提升用户标签的实时性,减少全量计算资源消耗。 ETL优化与性能调优: 使用 Spark SQL + Hive 处理日均 TB级 用户行为日志,优化 JOIN倾斜(...
添加客服微信,免费为您安排与该工程师直接沟通
长按二维码添加客服微信
如该工程师当前档期不合,也可免费为您推荐相似候选人