中小企业可视化数据中台解决方案

企业服务 数据服务 案例ID:212704
Jason
12 年经验· 保密
微信扫码沟通,客服可协助直接对接工程师;如当前档期不合,也可继续推荐相似案例作者。

案例介绍

基于阿里巴巴OneData方法论最佳实践搭建企业级别的数据中台。
技术选型 考虑因素:数据量大小、业务需求、行业内经验、技术成熟度(比如spark/flink)、开发维护成本、总成本预算等
1、数据采集传输:Flume(用户行为数据采集,因为这部分数据都是日志文件的形式),DataX(业务数据采集,因为要把数据从 MySQL 传输到 ClickHouse),Kafka(流量削峰)
2、数据存储:MySQL,ClickHouse
3、数据计算:ClickHouse
4、数据可视化;Superset离线数据分析
5、任务调度:DolphinScheduler(国产开源,兼具轻量级和功能丰富,用于离线)
6、集群监控Prometheus(实时)
7、Spring Cloud微服务框架
满足中小创业型公司数据中台建设和数据指标分析体系的建立,最小的成本满足多样性的数据分析场景和需求。

中小企业可视化数据中台解决方案

企业服务 · 数据服务 案例ID:212704
联系该工程师
微信扫码,建群沟通
作者: Jason - 12年经验- 保密

案例介绍

基于阿里巴巴OneData方法论最佳实践搭建企业级别的数据中台。
技术选型 考虑因素:数据量大小、业务需求、行业内经验、技术成熟度(比如spark/flink)、开发维护成本、总成本预算等
1、数据采集传输:Flume(用户行为数据采集,因为这部分数据都是日志文件的形式),DataX(业务数据采集,因为要把数据从 MySQL 传输到 ClickHouse),Kafka(流量削峰)
2、数据存储:MySQL,ClickHouse
3、数据计算:ClickHouse
4、数据可视化;Superset离线数据分析
5、任务调度:DolphinScheduler(国产开源,兼具轻量级和功能丰富,用于离线)
6、集群监控Prometheus(实时)
7、Spring Cloud微服务框架
满足中小创业型公司数据中台建设和数据指标分析体系的建立,最小的成本满足多样性的数据分析场景和需求。

相似案例推荐

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在 1 小时内与您联系确认。

1小时精推人才

需求方专属客服,免费梳理匹配

需求方客服微信二维码
扫码加微信 · 客服人工对接
更多案例
微信沟通 客服 看中这位工程师了?客服帮你 1 小时对接沟通 → ×