某国有企业-大数据平台数据管理及数据共享服务系统
本项目将依托某财务有限公司(以下简称“公司”)新一代核心业务系统建设项目,实现数据标准落标,旨在打造“架构统一、业务全面、数据贯标”的企业级数据平台,该公司项目统一整合各个分公司各类数据 ,形成统一的数据平台,在此基础上建设各类数据应用及数据服务。集成的数据 包括 核心系统,保理系统,资管系统,信管系统,风险系统等。为满足客户运监大屏展示需求,由行业大牛带领进行规划设计该公司级大数据平台-实时数据架构。
涉及技术:Airflow+Sqoop+CDH+Impala+Smartbi
Ogg+Kafka+Flink+Hive+Hbase