BI数据中台

电子商务 B2C 案例ID:207657
愿我如那时的风
5 年经验· 百秋电子商务公司
微信扫码沟通,客服可协助直接对接工程师;如当前档期不合,也可继续推荐相似案例作者。

案例介绍

公司数据电商代运营公司,需对公司内部及品牌方提供数据支持,满足对内日常及大促期间的数组保障(大促期间日均百万的订单量);用于支持实时数据大屏,各类数据汇总任务,多维度报表等相关数据类产品。通过整合相应的数据表。在数据库层面数据更加清晰,减少业务部门对于数据处理的时间,赋能业务部门。
● 基于消息中间件对大促期间 订单数据进行实时监听,将处理后的数据分库分表存入 MySQL中
● 定时补偿任务按照订单修改时间做批处理,使用 过滤重复数据,并使用 CountDownLatch和
AtomicInteger 优化任务日志输出内容
● 天猫京东部分获取数据接口收费,通过 AOP+Redis 形式监控接口调用频次,达到频次后
预警
● 使用 xxl-job 定时任务配合 kettle 清洗数据,汇总各品牌每日数据
● 根据品牌做分库分表处理,解决单库大数据性能瓶颈,提高系统稳定性和可用性
● 线上慢 SQL 优化,解决单库大数量下性能问题,提高系统可用性

BI数据中台

电子商务 · B2C 案例ID:207657
联系该工程师
微信扫码,建群沟通
作者: 愿我如那时的风 - 5年经验- 百秋电子商务公司

案例介绍

公司数据电商代运营公司,需对公司内部及品牌方提供数据支持,满足对内日常及大促期间的数组保障(大促期间日均百万的订单量);用于支持实时数据大屏,各类数据汇总任务,多维度报表等相关数据类产品。通过整合相应的数据表。在数据库层面数据更加清晰,减少业务部门对于数据处理的时间,赋能业务部门。
● 基于消息中间件对大促期间 订单数据进行实时监听,将处理后的数据分库分表存入 MySQL中
● 定时补偿任务按照订单修改时间做批处理,使用 过滤重复数据,并使用 CountDownLatch和
AtomicInteger 优化任务日志输出内容
● 天猫京东部分获取数据接口收费,通过 AOP+Redis 形式监控接口调用频次,达到频次后
预警
● 使用 xxl-job 定时任务配合 kettle 清洗数据,汇总各品牌每日数据
● 根据品牌做分库分表处理,解决单库大数据性能瓶颈,提高系统稳定性和可用性
● 线上慢 SQL 优化,解决单库大数量下性能问题,提高系统可用性

相似案例推荐

  • 手机电商系统

    手机电商系统

    之前在深圳开发过电子产品的维系和二次售卖系统,算是第一批做i

  • KDS

    KDS

    动态化研发工作流提供动态化研发任务(team动态化子任务类型

  • KeeP

    KeeP

    研发工作了提供从需求创建到产品发布全流程研发管理解决方案,提

  • 文创商城后台

    文创商城后台

    前端交互,完整后台登录体系 以及角色权限控制 表单提交

  • 电商系统开发

    电商系统开发

    1.erp系统大方向分为基础、采购、销售、库存,财务等模块。

  • Guan H5

    Guan H5

    采用 Uni-App 的脚手架搭建项目,实现一套代码多端生

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在 1 小时内与您联系确认。

1小时精推人才

需求方专属客服,免费梳理匹配

需求方客服微信二维码
扫码加微信 · 客服人工对接
更多案例
微信沟通 客服 看中这位工程师了?客服帮你 1 小时对接沟通 → ×