Lean-程序员外包案例列表-猿急送

爬取各个游戏平台广告数据

由于各个游戏平台的数据都是粗粒度的数据，包括新增活跃用户数，广告收入，买量消耗等，且统计口径与公司自研后台的不一致，需要进行整合，将收入数据和消耗数据整合到后台统计数据，并细粒度到分包级别...

通过 redis+celery 增量对海量用户事件日志进行分布式分析，主要是记录上次分析的日志文件偏移量，以及确认分布式任务的更新频率。...