数据开发平台
内容:搭建数据基于spring-cloud框架web开发平台,前端基于element-ui开发扩展基础组件和业务组件,基于G6和 aceEditer 开发复杂的可视化的工作流(以及所属子流,任务)配置和脚本编辑,通过基线管理和运维管理等模块实现告警和监控等
功能业绩:过往数据开发使用多种开发大数据引擎(或数据库)和调度脚本(hive,spark,impala,mysql,ClickHouse,shell等)依赖于多种开源工具,无法统一的管理,开发,调度,预警,通过数据开发平台让数据开发,运维等多种角色能在一个平台上工作,可以实现分布验证,多数据源数据分布定时抽取,抽取中有问题及时消息通知,获得公司颁布的优秀项目奖