基本信息

案例ID:183156

技术顾问:  - 7年经验 - 中软国际

联系沟通

微信扫码,建群沟通

项目名称:广告流量管理

所属行业:人工智能 - 其他

->查看更多案例

案例介绍

IMS广告流量管理 2021.06—至今
项目描述: 项目为华为广告流量预测,主要根据广告历史话单数据ODS层原始请求数据,对历史话单数据进行清洗、分析处理形成DW层数据。根据DW数据分析出各个广告位的历史流量、历史均值,根据统计的历史广告位的流量均值、曝光率等指标预估该广告的未来流量情况。将预估的广告位的流量结果写入ES跟clickhouse中。为在线侧提供预估数据,根据预估的的广告位的流量进行出售。
负责模块:离线数据仓库数据清洗、分析
数据质量的日常监控查看、问题定位、优化
Spark数据分析组件的开发
主要开发技术:Hivesql+Spark+Scala+Shell+Java+WiseDataOps
技术实现:对已有的历史广告数据请求话单表,使用hive、spark对数据进行清洗、聚合。得到设备请求频次表、大数据人群信息表、UV、PV请求历史表等等已有数据对未来的广告流进行预估。使用WiseDataOps大数据调度平台部署hivesql任务、spark任务等。以及完成对日常任务的监控、数据质量的管理。
项目描述: 项目为华为广告流量预测,主要根据广告历史话单数据ODS层原始请求数据,对历史话单数据进行清洗、分析处理形成DW层数据。根据DW数据分析出各个广告位的历史流量、历史均值,根据统计的历史广告位的流量均值、曝光率等指标预估该广告的未来流量情况。将预估的广告位的流量结果写入ES跟clickhouse中。为在线侧提供预估数据,根据预估的的广告位的流量进行出售。
负责模块:离线数据仓库数据清洗、分析
数据质量的日常监控查看、问题定位、优化
Spark数据分析组件的开发
主要开发技术:Hivesql+Spark+Scala+Shell+Java+WiseDataOps
技术实现:对已有的历史广告数据请求话单表,使用hive、spark对数据进行清洗、聚合。得到设备请求频次表、大数据人群信息表、UV、PV请求历史表等等已有数据对未来的广告流进行预估。使用WiseDataOps大数据调度平台部署hivesql任务、spark任务等。以及完成对日常任务的监控、数据质量的管理。

相似案例推荐

其他人才的相似案例推荐

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系聘用方端客服
联系聘用方端客服