将不同来源(包括Oracle,postgres,mysql,sqlserver,redis,hbase,kafka,ftp,http)的数据汇聚到一个数据仓库中,以供其他子系统使用。在数据抽取的过程中需要根据业务需要来处理不同的数据,如图片上传云存储,过滤不符合条件的数据等等。 开发环境与整体技术:springboot+mybatis+zookeeper+kettle+kafka 负责部分:主要负责数据汇聚子系统的数据抽取部分,根据用户页面选择的配置,生成相应的kettle任务流程发送到datai(任务调度引擎)进行抽取数据。
需求方专属客服,免费梳理匹配
添加客服微信,免费为您安排与该工程师直接沟通
长按二维码添加客服微信
如当前档期不合,也可免费为您推荐相似案例作者