制造采购产品线数据报表

企业服务 数据服务 案例ID:202787
刘强
9 年经验· OPPO移动通信有限公司
微信扫码沟通,客服可协助直接对接工程师;如当前档期不合,也可继续推荐相似案例作者。

案例介绍

1.Flink采集的离线实时业务库数据,相同mysql业务库用sqoop,不同业务库数据
用dataX,异构用kettle ETL 抽取 到hadoop用hive存储,用mapreduce/spark处理器sql查询出
数据与业务库数据对比验证完整性准确性:字段自身检查(数值不为负,比值大于100%)、数
据横向(表内字段间的逻辑关系,表之间,不同系统间对比一致)对比、纵向对比(聚合汇总,
明细表汇总到曲线图),再次 ETL 到 ODS, DWD,DWS 层的数据准备测试,梳理数据指标及
计算逻辑,编写思维导图,用例评审,编写 测试计划和方案,执行测试以及对缺陷的跟踪
闭环,转用户UAT 验收,出具报告
2.报表负载测试:提取需求 TPS,响应时间指标,TPS*响应时间计算大概并发数,jmeter
添加插件监控 CPU 利用率,持续施压查看 CPU 警戒值得出最优最大 TPS

制造采购产品线数据报表

企业服务 · 数据服务 案例ID:202787
联系该工程师
微信扫码,建群沟通
作者: 刘强 - 9年经验- OPPO移动通信有限公司

案例介绍

1.Flink采集的离线实时业务库数据,相同mysql业务库用sqoop,不同业务库数据
用dataX,异构用kettle ETL 抽取 到hadoop用hive存储,用mapreduce/spark处理器sql查询出
数据与业务库数据对比验证完整性准确性:字段自身检查(数值不为负,比值大于100%)、数
据横向(表内字段间的逻辑关系,表之间,不同系统间对比一致)对比、纵向对比(聚合汇总,
明细表汇总到曲线图),再次 ETL 到 ODS, DWD,DWS 层的数据准备测试,梳理数据指标及
计算逻辑,编写思维导图,用例评审,编写 测试计划和方案,执行测试以及对缺陷的跟踪
闭环,转用户UAT 验收,出具报告
2.报表负载测试:提取需求 TPS,响应时间指标,TPS*响应时间计算大概并发数,jmeter
添加插件监控 CPU 利用率,持续施压查看 CPU 警戒值得出最优最大 TPS

相似案例推荐

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在 1 小时内与您联系确认。

1小时精推人才

需求方专属客服,免费梳理匹配

需求方客服微信二维码
扫码加微信 · 客服人工对接
更多案例
微信沟通 客服 看中这位工程师了?客服帮你 1 小时对接沟通 → ×