工业大数据
案例介绍
实时采集工厂设备的信息，flink实时处理到doris库，DolphinScheduler定时汇总出结果表。原项目采用storm+mysql的方
式，进行了全新改造。
①改造原始框架、设计新框架
②环境搭建设计、部署
③数据处理逻辑优化，减少对redis的依赖
④DolphinScheduler部署使用，利用doris的性能，减少代码处理数据
⑤flink采用Scala编写、部署
⑥sql编写，用于后端查询数据，减少后端计算数据的压力
⑦手写数据迁移工具，从mysql到doris
工业大数据
案例介绍
系统架构：kafka+flink+HBase+redis+doris+DolphinScheduler
实时采集工厂设备的信息，flink实时处理到doris库，DolphinScheduler定时汇总出结果表。原项目采用storm+mysql的方
式，进行了全新改造。
①改造原始框架、设计新框架
②环境搭建设计、部署
③数据处理逻辑优化，减少对redis的依赖
④DolphinScheduler部署使用，利用doris的性能，减少代码处理数据
⑤flink采用Scala编写、部署
⑥sql编写，用于后端查询数据，减少后端计算数据的压力
⑦手写数据迁移工具，从mysql到doris
案例图片
相似案例推荐
-
数据库跨平台迁移
实验的目的是把windows(11.2.0.4)平台上的源数
-
基于golang 慢查日志解析
使用golang实现mysql slowLog的解析，包含了
-
项目管理系统
基于Odoo框架开发的项目管理系统。 包括项目阶段管理，集
-
智慧数采中心
本项目采用MVC架构，负责数据库的建立，模块的开发，本系统为
-
华仁节能环保大数据中心平台
带领团队进行了开发工作，需求对接，框架搭建，重要功能的开发，
-
oneApp
功能：新增任务、任务上下线设置、任务排序、任务编辑 项目责
1小时精推人才
需求方专属客服，免费梳理匹配
