ID:424032

豆丁

大数据开发工程师

  • 公司信息:
  • 东方金信
  • 工作经验:
  • 1年
  • 兼职日薪:
  • 500元/8小时
  • 兼职时间:
  • 下班后
  • 周日
  • 所在区域:
  • 深圳
  • 宝安

技术能力

大数据技术栈
 熟悉 Hadoop 生态(HDFS、Hive、HBase)数据交互与运维;
 熟悉 Flink-SQL 开发、Flink-CDC 数据同步组件,可通过 Python 完成 Flink 二次开发与功能扩展;
 熟练操作腾讯 WeData、Enerlink、TBDS 大数据平台,具备平台化数据开发与调度经验。 数据库
 熟练使用 Oracle、MySQL、PostgreSQL、Greenplum 等主流关系型/ 数仓数据库,具备数据库建模、SQL 优化、
性能调优及全生命周期运维能力,保障数据存储与查询效率。
ETL & 调度工具
 熟练使用 Kettle、DataX 等 ETL 工具,可独立完成多源数据采集、清洗、转换、加载;
 熟练运用 Dolphinscheduler(DS)搭建分布式调度体系,配置多级告警机制,保障数据任务稳定运行。
BI 可视化
 熟练使用帆软 FineReport/FineBI、Tableau、PowerBI、SmartBI、Cognos 等主流 BI 开发工具;
 能独立完成 BI 平台搭建、可视化报表开发、大屏设计、权限配置及用户培训。 开发 & 数仓相关
 熟练使用 Python、Shell 脚本编程、Hive SQL;
 理解数仓设计原理,具备 ODS/DIM/DW/DWS/ADS 分层建模实战经验;
 熟悉数据治理、数据资产盘点、元数据管理及数据质量校验,制定标准化数仓开发规范。

项目经验

瑞泰马钢透明工厂 2.0 项目
 对接马钢生产、质量、采购、财务、营销、运管 6 大业务主题,梳理核心业务指标,形成标准化指标字典。
 制定统一的指标开发规范与模板,梳理指标计算逻辑,基于 TBDS 平台完成全流程 ETL 开发与调度配置,实现指标
自动化更新。
 参与帆软 FineReport 报表开发,落地生产全流程可视化报表,覆盖工厂从原料采购到成品出库全链路监控,支撑
生产流程优化。
 负责 ETL 任务日常运维与优化,解决数据延迟、指标错误等问题,保障工厂生产数据实时性与准确性,支撑透明工
厂数字化转型。

山西鹏飞数据仓库项目
 参与项目前期业务部门需求调研,梳理业务系统数据规范与流转逻辑,为项目落地提供依据。
 参与数仓分层建模,主导 DIM 维度表、ADS 指标层结构设计,完成核心业务指标开发与落地,支撑鹏飞集团财务、
生产、采购等核心业务分析。
 实现多业务系统数据无缝同步至数仓 ODS 层,基于 Dolphinscheduler 搭建全流程调度体系,配置邮件告警,保障
任务稳定执行。
 负责数仓日常运维与问题排查,处理数据异常,保障各业务部门数据查询、分析的及时性与准确性,严格控制数据
错误。

浙江能源集团应急调度指挥中心系统
 主导浙能应急指挥中心填报系统及智能报表平台搭建、升级与维护,完成电力、煤炭、石油、天然气 4 大板块生产
数据管理体系搭建。
 使用 FineReport 开发填报系统报表,实现 4 大板块生产数据线上填报、PC 及移动端驾驶舱、统计与分析,完成基
础数据标准化维护,优化数据录入流程。
 使用 FineBI 开发 50+智能报表,对各板块生产指标分类可视化,为集团及下属公司提供自定义报表分析能力,支撑
应急调度决策。
 开展客户方用户培训,编写操作手册,保障系统高效落地使用,优化应急调度数据处理流程。

案例展示

  • 浙能应急调度指挥中心大屏

    浙能应急调度指挥中心大屏

    在浙能集团“四业”发展的战略转型过程中,保障生产安全是其中的重要基础环节,建设以生产数据为基础的应急调度指挥中心,实现生产安全监控、应急指挥等功能,是集团保障安全生产、提高竞争力的重要抓手,也是展示生产经营、改革发展成果的重要窗口,有利于提升集团整体形象。

  • 中国中铁大屏

    中国中铁大屏

    建立中国中铁企业级BI平台,实现企业内外部相关数据的融合、使用、落地和可视化展示,形成企业数据资产,为中国中铁全面提升数据资产价值。

查看案例列表(含更多 0 个案例)

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服