项目背景:
“银河大数据平台”是一款专注于作为企业数字化基础设施,D.I BDP面向企业客户提供数据集成、存储、开发、管理的一站式服务,帮助数据研发人员快速高效的完成数据研发与资产管理工作,辅助企业科学规划和合理构建全域数据,标准、规范、高效的管理数据,以开放的方式实现企业内部数据共享,充分发挥数据价值。
项目描述:
一站式平台能力涵盖8大功能模块,与数据集成、数据开发等联动,可以一站式地完成大数据的开发和治理工作,数据集成:基于低代码的可视化数据集成,支持数据入仓、数据出仓及异构数据源间的数据同步,数据标准:通过元标准定义、标准库、标准管理等功能……
使用技术:
框架采用spring + MyBatis+dubbo,数据库采用mysql, Git 作为版本管理工具,组件部分有 hadoop、kafka、spark、hive、hbase、zk、kerberos、docker、es、canal……
责任描述:
1. 负责项目交付时客户提出的问题的解答与bug修复;
2. 客户对于系统的定制化需求的评估与开发;
3. 负责系统与三方系统的对接;
4. 日常的系统巡检与需求上线的部署工作;