风险洞察系统

企业服务 数据服务 案例ID:143454
匠心
10 年经验· 华胜天成
微信扫码沟通,客服可协助直接对接工程师;如当前档期不合,也可继续推荐相似案例作者。

案例介绍

因行业涉及敏感数据,故无案例图。

该项目主要用于公安机关,打造公共安全领域信息化建设、web应用层是由10多个web应用子系统组的微服务集群;数仓层是基于CDH搭建的大数据应用平台;外部源数据层是该系统依赖的其他第三方服务。其中本人主要参与数仓层建设,数仓分为数据集市与应用数据集市两大块、数据集市主要用于全局搜索、应用集市用于web系统调用;并使用kettle,编写ETL脚本,分别从不同数据源如mysql、oracle;webserice、hdfs等源数据中抽取数据,并通过规则清洗,加密等逻辑发到给kafaka;最后落盘到不同数据集市层。

风险洞察系统

企业服务 · 数据服务 案例ID:143454
联系该工程师
微信扫码,建群沟通
作者: 匠心 - 10年经验- 华胜天成

案例介绍

因行业涉及敏感数据,故无案例图。

该项目主要用于公安机关,打造公共安全领域信息化建设、web应用层是由10多个web应用子系统组的微服务集群;数仓层是基于CDH搭建的大数据应用平台;外部源数据层是该系统依赖的其他第三方服务。其中本人主要参与数仓层建设,数仓分为数据集市与应用数据集市两大块、数据集市主要用于全局搜索、应用集市用于web系统调用;并使用kettle,编写ETL脚本,分别从不同数据源如mysql、oracle;webserice、hdfs等源数据中抽取数据,并通过规则清洗,加密等逻辑发到给kafaka;最后落盘到不同数据集市层。

相似案例推荐

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在 1 小时内与您联系确认。

1小时精推人才

需求方专属客服,免费梳理匹配

需求方客服微信二维码
扫码加微信 · 客服人工对接
更多案例
微信沟通 客服 看中这位工程师了?客服帮你 1 小时对接沟通 → ×