基于阿里巴巴OneData方法论最佳实践搭建企业级别的数据中台。
技术选型 考虑因素:数据量大小、业务需求、行业内经验、技术成熟度(比如spark/flink)、开发维护成本、总成本预算等
1、数据采集传输:Flume(用户行为数据采集,因为这部分数据都是日志文件的形式),DataX(业务数据采集,因为要把数据从 MySQL 传输到 ClickHouse),Kafka(流量削峰)
2、数据存储:MySQL,ClickHouse
3、数据计算:ClickHouse
4、数据可视化;Superset离线数据分析
5、任务调度:DolphinScheduler(国产开源,兼具轻量级和功能丰富,用于离线)
6、集群监控Prometheus(实时)
7、Spring Cloud微服务框架
满足中小创业型公司数据中台建设和数据指标分析体系的建立,最小的成本满足多样性的数据分析场景和需求。
提供一套集:算法开发,平台服务,高端传感器研制为一体的工业互
园区电力监控,与智能开关实现数据交互,实时掌握各部门,各房间
数据驾驶舱,大屏幕项目开发, 前端页面整体搭建,数据接口调
电网内部数据管理、辅助调度员决策等,为电网实现清洁能源智能调
电网内部数据管理、辅助调度员决策等,为电网实现清洁能源智能调
该作品是xx省的一个警务管理系统,使用的是react+ant
需求方专属客服,免费梳理匹配
添加客服微信,免费为您安排与该工程师直接沟通
长按二维码添加客服微信
如当前档期不合,也可免费为您推荐相似案例作者