基于纵目科技整个运营体系,解决数据孤岛问题,为纵目科技构建数据中台,提升数据整合和运营决策效率,实现从传统信息化到现代数字化的转型。本人在纵目科技担任数据中台技术经理,主要负责以下工作内容:
1. 负责数据中台微服务系统架构的规划与实现,确保从代码框架到服务部署架构的优化,强化数据中台技术底座;
2. 负责项目的核心功能研发与设计,推动技术创新与应用;
3. 负责数据治理。从源头定义数据标准,全公司各部门应用。
4. 负责数据仓库设计。将数据仓库分层设计,分 ODS 层,DW 层。ODS 层主要将公司各业务系统所需的主要数据抽取进行原样保存,通过ETL工具进行清洗,转换后,汇聚到 DW 层,DW 层数据将提供给各应用或报表展示和使用。
5. 负责主数据管理。从数仓拉取数据,将通过数据中台以 RESTful API方式设计的 API 进行对外提供服务和使用。
6. 负责数据中台各数据服务的 API 设计,以 RESTful API方式进行设计,并编写了各数据服务 API 对应的接口文档。
7. 负责跨部门协调和沟通,推进项目的有序发展。
8. 领导研发团队,实施敏捷开发流程,确保项目高效推进;
9. 制定和执行代码规范管理,以及绩效评估体系,提高团队执行力与项目质量。
- 利用 Kubernetes 和 SpringCloud、Docker 搭建可扩展的微服务架构;
- 集成 Nacos 作为注册与配置中心,Gateway 网关和 Feign 进行服务间高效调用;
- 采用 Seata 处理分布式事务,确保数据一致性;
- 引入 xxl-job 作为任务调度中心,提升任务执行的可靠性和效率;
- 利用 Mysql 进行数据存储,Nginx 负责请求分发,以及 MinIO 为内部文件服务提供支持;
- 实施 Redis 与 RockeMQ 以优化数据流处理;
- 运用 ETL 与 Kettle 工具进行数据集成与转换,通过 Kettle 任务调度平台实现自动化;
- 采用 BI 工具提升数据分析与决策支持能力。
本项目针对 3C 电子元件缺陷检测场景,构建从数据标注到算法
项目概述 本项目旨在通过自动化手段采集贝壳找房平台上的长沙
项目简介:使用VGG、ResNet18和ResNet50,对
项目简介:对数据进行降噪与清洗处理,确保从Beautiful
我司核心团队业务涵盖嵌入式系统集成(如FPGA/ARM嵌入式
背景与需求 随着资本市场的发展,投资者需要快速获取最新的股
需求方专属客服,免费梳理匹配
添加客服微信,免费为您安排与该工程师直接沟通
长按二维码添加客服微信
如当前档期不合,也可免费为您推荐相似案例作者