案例介绍
大数据底座为海量公共数据资源提供存储和计算能力。本系统采用目前主流的大数据技术框架Hadoop3.2以及常用的技术组件包括HDFS、Yarn、Zookeeper、Hive、HBase、Spark、Flink、Presto、Elasticsearch、Tez、hudi、Sqoop等来构建整个大数据底座的技术体系,可基于arm框架，国产操作系统等来完成运维部署,具备向导式与一键部署的能力。
在功能层面，本系统的数据底座已具备提供包括数据存储、数据计算、集群管理与监控等功能：
本系统的数据存储主要由分布式文件系统、分布式列式数据库、关系型数据库、时序数据库、空间数据库、分布式数据仓库等技术组件构成；
本系统的数据计算支持tez、Spark、Storm和Flink等批量/实时计算框架，提供海量历史数据的离线/实时计算处理能力，可实现单条查询速度<3ms，在十亿+条日志量中查检索时间<5s；
本系统的集群管理和监控主要包含大数据底座集群的管理、监控、诊断、维护及多租户资源管理等方面的功能。
案例图片
相似案例推荐
其他人才的相似案例推荐
-
城市雨洪模拟规划系统
城市雨洪模型建模，包括mike，tuflow，12d dra
-
⾦⻛科技⻛电场项⽬
负责⾦⻛科技PLC控制数据采集⼯业交换机光纤环⽹、视频监控⽹
-
运营商商企产品⼊库
负责运营商家宽市场营销拓展，主导集团政企ICT产品⼊库与落地
-
自动化运维监控
该案例为企业服务器自动化发布与监控运维方案，负责 Linux
-
FluxDNS—现代化 DNS 管理工具
现代化 DNS 记录管理与自动化工具,支持多 Provide
-
多上游 AI API 网关/聚合代理
基于开源 new-api 的二次开发版本,统一聚合 40+
-
水文水力云计算
水文水力模型及计算云工具，包括建模、模型结果后处理和水文水力
-
客服知识库系统
该项目是一个面向企业客服和运营团队的知识库问答系统，用于将常
-
Docker+Nginx 容器化部署项目
我主导了企业 Web 应用的容器化改造项目，基于 Docke
-
政企服务器集群运维交付项目
我负责政企信息化项目服务器集群的全流程运维与交付工作，涵盖
-
供应链数字一体化
负责该系统的可视化模块，前期实施，后期运维，处理工单，维护国
-
深度研究报告
Deep Research Studio 是一个本地深度研究
微信接收人才推送
关注猿急送微信平台，接收实时人才推送
