项目名称 :悦云数据仓库
技术架构:sqoop、hadoop、hive、spark、zookeeper、flume、kafka、atlas、azkaban
本项目构建了支撑复杂业务场景的企业级数据仓库平台,覆盖17个商业综合体及96个物业项目,实现从数据采集、存储计算、治理应用到高可用保障的全流程闭环管理。核心架构与流程如下:
全域数据建模与规范治理:
统一建模: 采用维度建模方法论,设计覆盖商业招商、物业运维、能耗管理等8大核心业务域的总线矩阵,定义核心数据实体(如租户、设备、空间、工单、能耗单元)及其关联关系,支撑跨域分析。
规范先行: 制定并强制执行涵盖数据命名、质量管控(完整性、准确性、一致性)与访问控制的数据开发与管理规范,为数据资产化奠定基础。
存储与计算引擎:
1.基于 Hadoop (HDFS) 提供海量数据存储能力,采用 Spark 作为核心分布式计算引擎。
2.主要依托 Hive on Spark 执行大规模离线批处理,高效支撑日均亿级数据记录
多源异构数据集成 (ETL):
实时流接入:
设计并部署前后端埋点,采集商圈客流、物业工单、水电计量、停车流水等核心场景行为日志,日均采集量达TB级别。
利用 Flume + Kafka 构建高吞吐、低延迟(毫秒级)的实时数据管道,确保行为日志快速入仓。
批量数据同步:
调度 Sqoop 作业,抽取多个业务系统(ERP, CRM, IoT平台等)的结构化数据。
结合 Flume 完成日志类等半结构化/非结构化数据的批量采集。
实现关键业务系统数据小时级增量/全量同步入仓。
分层建模与数据治理:
主题域模型: 在数据仓库明细层 (DWD),针对关键业务概念(如用户全域视图、房间全生命周期)构建强一致性、整合多源数据的主题模型,有效解决商业系统与物业系统间的数据歧义问题。
血缘分析: 集成 Apache Atlas,实现字段级数据血缘追踪,支持数据溯源、影响分析。
数据驱动业务增长:
DMP平台建设:基于DWS层搭建用户数据平台,利用 RFM模型+聚类算法动态生成百万会员画像,解析 "大汉新生活"APP亿级别行为日志,识别用户消费偏好与活跃时段;设计商圈优惠券定向推送策略(基于地理位置+消费等级),推动会员季度复购率
业财报表与大屏:基于数仓产出的数据集市,构建公司各业务系统数据报表、财务报表、大屏,并与各业务系统无缝集成(报表制作工具采用永洪BI)
---------------------------------------------------------------------------------------------------------
项目名称:大汉物业云(物业管理ERP系统)
技术架构:spring cloud alibaba、mybatis plus、redis、nacos、feign、sentinel、rocketMQ、Zipkin、Nginx
项目描述:智慧物业管理方案是为集团性企业进行资产管理的解决方案。系统通过费效管理,业财一体等数字化手段帮助集团远程监控物业资产,真正实现人员在线、组织在线、业务在线,为集团降本增效。
技术设计:深度参与核心模块需求评审,结合业务场景制定精细化落地方案,确保业务流程闭环。部署基于 Redis 的缓存及分布式锁方案,提升系统响应速度;同时主导代码 review 与接口优化,保障系统高效稳定运行。
业务开发:
独立承担报事报修、装修管理后端模块的全流程开发,从需求分析到功能实现,确保模块贴合业务实际。搭建主数据管理平台,完成项目、楼栋、楼层、物业管理人员等核心主数据的开发及下发 API 实现,保障基础数据高效流转,为物业资产在线化管理提供坚实数据支撑。
基于数仓、用友财务数据,构建替换用友对应的财务板块,为集团财务部大幅降低工作量,年节省10万+续约费用。
数据集成:基于数据仓库架构开发各类复杂业务报表与可视化业务大屏,直观呈现物业运营数据打通永洪 BI 系统与物业云平台,实现用户信息及权限的自动同步,将报表无缝集成至物业云,让用户无需切换系统即可无感知查阅数据,助力集团远程监控资产状态与科学决策。
---------------------------------------------------------------------------------------------------------
项目名称 :大汉新生活(商圈小程序电商)
技术架构:spring cloud alibaba、mybatis plus、redis、nacos、feign、sentinel、rocketMQ、Zipkin、Nginx
1、核心模块开发:独立负责优选好货、精选套餐及助力模块开发,保障用户选购商品与服务的核心流程顺畅。深度参与停车券模块开发,协同完善商圈消费配套功能,通过模块化开发提升用户体验与平台实用性,为商圈电商生态搭建基础框架
2、技术优化实现:基于分类算法构建用户画像,成功落地悦友模块,实现精准化服务推荐。采用 Redis 实现缓存与锁机制,支撑 2023 年大汉工匠院非遗年消费券抢购,高效应对高并发场景,运用 Sentinel 组件配置服务限流异常熔断与降级策略,解决微服务架构下的服务雪崩问题,保障活动稳定有序,提升平台技术承载力。
3、协同项目推进:参与需求评审,结合业务场景制定合理开发计划,确保项目节奏可控。跨模块协作中,主动衔接各功能板块,协调解决开发难点,推动整体项目按节点落地,助力商圈线上电商平台
-----------------------------------------------------------------------------------
其他项目
悦云数字科技:
汉云企业数字化平台:https://ope.dahangroup.com/#/login
大汉数据中心(内部系统,主要处理数据资产)
悦小企:订单化工单分派系统
用户画像:基于python、结巴分词、分类算法 的用户画像系统
拓维信息系统股份有限公司:
中小学学籍管理系统 :https://xjxt.hnedu.cn/
优+ 小程序(响应国家号召助力学生德智体美劳全面发展)