厚

数据架构师
京东 · 15年经验
厚
日薪: ¥500/8h
地点: 北京
时间: 周六周日可工作日远程可工作日驻场(自由职业原因)
ID:434070 复制

0
接单数
0
评价数
0
收藏数

AI 技能提取 | 微服务 Kafka Java Python Redis Oracle Hadoop Spark Flink
技术栈覆盖 Hadoop、Spark、Flink、Kafka、Redis 等主流大数据组件,Paimon、Hudi 湖仓架构,Presto、Doris、Tableau 等 OLAP 分析工具,以及 Oracle、Informatica、DataStage、Kettle 等传统数仓 ETL 技术;熟悉 Python、Java、Scala,了解 DDD 与微服务。

1、主导技术栈迭代,设计 Spark/Flink 共用udf的流批一体架构,实现算法工程化;
2、落地 Apache Paimon 湖仓方案,提供数据的准实时服务;
3、深度优化价格数据结构,实现存储占用从 1PB 降至 200TB,成本削减 80%;
4、支持 ABtest,研发数据灰度控制框架,支持多维度的流量切分与回滚机制,保障大规模数据切换的安全性;
5、建立计算可解释性体系,完整保留中间态指标与决策路径日志,为业务方提供透明的星级推导依据,为客服AI提供数据支持。
厚 ID:434070 复制

厚

数据架构师 · 15年经验 · 京东
城市北京 日薪500元/8h 时间 周六周日可工作日远程可工作日驻场(自由职业原因)
0
累计接单
0
用户评价
0
被收藏

信用行为

0
接单数
0
评价数
0
收藏数

技术能力

AI 技能提取 | 微服务 Kafka Java Python Redis Oracle Hadoop Spark Flink
技术栈覆盖 Hadoop、Spark、Flink、Kafka、Redis 等主流大数据组件,Paimon、Hudi 湖仓架构,Presto、Doris、Tableau 等 OLAP 分析工具,以及 Oracle、Informatica、DataStage、Kettle 等传统数仓 ETL 技术;熟悉 Python、Java、Scala,了解 DDD 与微服务。

项目经验

1、主导技术栈迭代,设计 Spark/Flink 共用udf的流批一体架构,实现算法工程化;
2、落地 Apache Paimon 湖仓方案,提供数据的准实时服务;
3、深度优化价格数据结构,实现存储占用从 1PB 降至 200TB,成本削减 80%;
4、支持 ABtest,研发数据灰度控制框架,支持多维度的流量切分与回滚机制,保障大规模数据切换的安全性;
5、建立计算可解释性体系,完整保留中间态指标与决策路径日志,为业务方提供透明的星级推导依据,为客服AI提供数据支持。
客服二维码

没找到合适的人才?

扫码添加客服极速匹配,或直接发布需求让更多人才主动报名

平台担保交易 · 1小时内不满意可退款

平台信誉与实力

基于 35,336 需求方信任

  • ✓ 支付宝企业信用分 优秀 评级
  • ✓ 市场份额约占全行业三分之一
  • ✓ 程序员兼职行业全能首选平台
查看平台资质详情
收藏