专业背锅侠

中级大数据工程师
明略科技 · 7年经验
专业背锅侠
日薪: ¥800/8h
地点: 上海 长宁
时间: 下班后周六周日
ID:409271 复制

0
接单数
0
评价数
0
收藏数

AI 技能提取 | Kafka Java Python Hadoop Flink Hive
1. 编程与脚本语言
java/Python
Shell脚本编写
SQL及优化
2. 大数据组件
Hadoop、Flink、Hive、Doris、Kafka、DolphinScheduler 等
3. 技能
数据集成与数据ETL
数据仓库与建模
数据可视化与分析
数据治理与安全

在数据平台建设过程中,我参与多个核心项目,充分体现了自己在大数据处理、实时计算和智能化业务场景中的技术能力。其中,我负责搭建 企业级数仓体系(ODS–DWD–DWS–ADS),包括数据模型设计、数据规范统一以及离线任务调度优化。通过对主题域的拆分和指标统一管理,大幅提升了数据复用性和查询效率。
在实时计算方向,我基于 Flink 构建了实时指标处理链路,涵盖数据接入、窗口聚合、状态管理与结果下发,实现了毫秒级的数据更新能力。通过对 Flink 作业进行并行度调优、Checkpoint 优化和状态后端设计,系统稳定性和吞吐量均得到显著提升。
此外,我负责开发了 基于大模型的智能审批数据系统,将业务审批流程与大模型能力结合,实现了审批材料自动抽取、字段校验、风险识别和智能决策辅助。系统落地后,人工审核量减少约 40%,审批效率明显提升。
专业背锅侠 ID:409271 复制

专业背锅侠

中级大数据工程师 · 7年经验 · 明略科技
城市上海 长宁 日薪800元/8h 时间 下班后周六周日
0
累计接单
0
用户评价
0
被收藏

信用行为

0
接单数
0
评价数
0
收藏数

技术能力

AI 技能提取 | Kafka Java Python Hadoop Flink Hive
1. 编程与脚本语言
java/Python
Shell脚本编写
SQL及优化
2. 大数据组件
Hadoop、Flink、Hive、Doris、Kafka、DolphinScheduler 等
3. 技能
数据集成与数据ETL
数据仓库与建模
数据可视化与分析
数据治理与安全

项目经验

在数据平台建设过程中,我参与多个核心项目,充分体现了自己在大数据处理、实时计算和智能化业务场景中的技术能力。其中,我负责搭建 企业级数仓体系(ODS–DWD–DWS–ADS),包括数据模型设计、数据规范统一以及离线任务调度优化。通过对主题域的拆分和指标统一管理,大幅提升了数据复用性和查询效率。
在实时计算方向,我基于 Flink 构建了实时指标处理链路,涵盖数据接入、窗口聚合、状态管理与结果下发,实现了毫秒级的数据更新能力。通过对 Flink 作业进行并行度调优、Checkpoint 优化和状态后端设计,系统稳定性和吞吐量均得到显著提升。
此外,我负责开发了 基于大模型的智能审批数据系统,将业务审批流程与大模型能力结合,实现了审批材料自动抽取、字段校验、风险识别和智能决策辅助。系统落地后,人工审核量减少约 40%,审批效率明显提升。
客服二维码

没找到合适的人才?

扫码添加客服极速匹配,或直接发布需求让更多人才主动报名

平台担保交易 · 1小时内不满意可退款

平台信誉与实力

基于 35,336 需求方信任

  • 支付宝企业信用分 优秀 评级
  • 市场份额约占全行业三分之一
  • 程序员兼职行业全能首选平台
查看平台资质详情
收藏