实时计算SQL管理系统

企业服务 数据服务 案例ID:151926
小伦子
3 年经验· 连连
微信扫码沟通,客服可协助直接对接工程师;如当前档期不合,也可继续推荐相似案例作者。

案例介绍

原始计算平台依赖SQL存储过程,吞吐量低、开发维护困难,进过调研各种实时计算平台,最终决定基于Flink搭建一套集开发以及监控的计算平台

1. 在迁移历史项目的时候发现,一个单一的Flink Job开发涉及到代码编写、编译、包上传、查看日志等多个步骤,开发周期以周为单位,针对这个问题,基于Flink SQL Client和terminado开发了一套SQL实时调试系统,支持在web直接编写SQL开发和调试,支持实时返回运行结果,将Flink Job开发调试周期压缩到日,减少了90%的调试时间
2. 随着平台跑的Flink Job越来越多,设计了一套web界面管理并监控Flink Job,支持邮件报警,以及自定义Hook

实时计算SQL管理系统

企业服务 · 数据服务 案例ID:151926
联系该工程师
微信扫码,建群沟通
作者: 小伦子 - 3年经验- 连连

案例介绍

原始计算平台依赖SQL存储过程,吞吐量低、开发维护困难,进过调研各种实时计算平台,最终决定基于Flink搭建一套集开发以及监控的计算平台

1. 在迁移历史项目的时候发现,一个单一的Flink Job开发涉及到代码编写、编译、包上传、查看日志等多个步骤,开发周期以周为单位,针对这个问题,基于Flink SQL Client和terminado开发了一套SQL实时调试系统,支持在web直接编写SQL开发和调试,支持实时返回运行结果,将Flink Job开发调试周期压缩到日,减少了90%的调试时间
2. 随着平台跑的Flink Job越来越多,设计了一套web界面管理并监控Flink Job,支持邮件报警,以及自定义Hook

相似案例推荐

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在 1 小时内与您联系确认。

1小时精推人才

需求方专属客服,免费梳理匹配

需求方客服微信二维码
扫码加微信 · 客服人工对接
更多案例
微信沟通 客服 看中这位工程师了?客服帮你 1 小时对接沟通 → ×