案例ID:241034
技术顾问:与光同尘 - 3年经验 - 昱新科技
联系沟通
项目名称:Spark+Hadoop 大数据平台搭建
所属行业:电子商务 - B2C
独立完成 Spark+Hadoop 大数据平台基础设施搭建,部署 HDFS 分布式存储、YARN 资源调度、Hive 数仓、Flume 日志采集与 Sqoop 数据同步组件,构建完整的数据处理链路。配置 ZooKeeper 实现集群高可用,避免单点故障。优化 Spark 任务内存分配与 Shuffle 策略,提升离线计算任务效率,数据处理效率提升 40%。搭建 Prometheus+Grafana 监控体系,实现集群资源可视化与告警,支撑 TB 级数据的离线计算与存储业务稳定运行。
其他人才的相似案例推荐
【作品功能】 本工具用于批量合并多个店铺的Excel销售报
【作品功能】 本工具用于批量合并多个Excel/CSV文件
搭建一体化物联网项目,深度融入阿里数字生态体系,依托阿里云平
1. Selenium 商品采集模块(官方sdk给出的客户指
基于SpringBoot开发的开源Java后台管理系统,采用
功能介绍(功能服用) 功能模块:购物车、下单、支付、退款、
集成人工智能技术的无人零售设备,通过图像识别、传感器技术实现
北展律师小程序|四川北展律师事务所专属智慧法律服务平台
“居律通”智慧物业管理小程序是由我们团队自主研发的一款集“物
作品名称:物归 - AI 驱动的个人资产与穿搭管理 APP
使用 element plus 开发的后端控制台页面,有微信
企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才
关注猿急送微信平台,接收实时人才推送