ID:411482

zzpc

etl开发

  • 公司信息:
  • 世界中医联合学会
  • 工作经验:
  • 3年
  • 兼职日薪:
  • 600元/8小时
  • 兼职时间:
  • 下班后
  • 周六
  • 周日
  • 可工作日远程
  • 所在区域:
  • 北京
  • 朝阳

技术能力

1.具备8年IT行业从业经验,深耕医疗行业(数据采集、清洗、转换、加载、质量监控)工作;熟悉安定医院数据平台架构及运维规范,熟练掌握DTSphere Bridge/River/DSC等核心工具。
2.精通MySQL/Oracle数据库运维及SQL语句优化,熟练运用Linux Shell脚本开发自动化运维工具;具备ETL任务性能调优、故障快速定位及应急处理能力。
3.工作严谨细致、责任心强,具备良好的团队协作与沟通能力;树立7×24小时运维响应意识,可高效保障医疗数据ETL流程稳定运行。
4.深入理解医疗数据标准化要求及安全合规规范,熟练掌握数据加密(SM4/AES)、脱敏、权限管控等安全技术,可有效保障敏感数据安全。
5.熟练掌握HTML、CSS、JavaScript等前端技术,具备全栈开发思维;可快速对接数据服务接口开发与运维需求。

项目经验

2025.02-至今 安定医院 数据工程师(ETL方向)
•负责医院多源核心数据(HIS/LIS/PACS/电子病历等)的ETL全流程搭建与运维,基于DTSphere Bridge工具构建数据集成通道,实现批量与实时数据的采集、清洗、转换及加载,保障数据同步成功率≥99.9%。
•主导数据转换规则设计与优化,针对超1GB医疗影像及检验数据启用流式解析插件;配置表输出插件单次提交记录数5000-10000条,通过增量标记字段(更新时间戳)实现增量同步,同步延时控制在5秒内,确保无数据积压。
•负责医疗数据标准化落地,严格遵循ICD-10疾病编码、国家药品编码等行业标准,统一数据格式(JSON下划线命名法)及字段类型(时间字段统一为yyyy-MM-dd HH:mm:ss格式);启用数据检验插件,实现数据格式合规率100%,核心字段(患者ID、就诊时间)非空校验均达标。
•搭建数据质量监控体系,配置非空校验、格式一致性校验、数值合理性校验等规则;每日通过Bridge数据对账模块核对源端与目的端数据,确保数据差异率为0%,数据质量规则执行率100%。
•负责ETL作业调度体系运维管理,统筹512个并发作业全生命周期;优化任务依赖关系,避免同一时间启动超50个作业;监控通道使用率≤80%,设置核心任务重试次数≥3次,实现作业调度准时率≥99.5%,慢任务(执行时长>1小时)优化率≥30%。
•负责服务器资源与ETL任务监控,通过Zabbix/Prometheus工具实时跟踪CPU(使用率≤70%)、内存(使用率≤80%)、磁盘(使用率≤85%)等资源占用情况;开发Shell自动化脚本(含日志清理、配置备份、数据对账等功能),按规范每周清理30天前过期日志,每月完成ETL配置全量备份并异地加密存储。
•负责ETL全流程故障处理,针对转换任务失败、增量漏数、数据格式错误等问题建立紧急故障响应机制,确保15分钟内响应;通过日志分析精准定位插件配置、字段映射等问题根源,实现故障恢复时间≤30分钟,保障临床诊疗、医保结算、科研数据等核心业务连续性。
•参与数据安全合规体系建设,实现ETL传输过程SSL/TLS加密;对敏感患者数据(身份证号、手机号等)采用SM4/AES加密算法加密处理并脱敏存储;定期开展接口权限审计,清理无效授权,确保日志留存时长≥90天,全面符合医疗数据安全相关规范。
2020.05-2025.02 世界中医药联合学会中药上市后研究与评价专委会秘书处 IT项目经理
•主导医院HIS系统数据模块开发,负责多数据源(MySQL/Oracle)数据抽取与标准化处理;运用ETL技术完成患者信息、诊疗记录、检验结果等数据的清洗、转换与整合,为医疗数据分析及决策提供数据支撑。
•负责EDC系统数据管理模块运维,设计数据采集、校验、存储全流程ETL方案;保障临床试验数据准确性,通过建立数据对账机制确保数据完整性,有效提升数据质量与研究效率。
•负责服务器架构设计与性能优化,监控ETL任务资源占用;通过SQL语句优化、连接池参数调整(默认连接数50,高并发场景可调至100)等方式解决数据同步瓶颈,保障系统稳定运行与数据安全。
2018.08-2020.05 北京韶华科技发展有限公司 IT项目执行
•主导ETL系统开发与维护,支持MySQL、MSSQL、Oracle多数据源连接;设计数据源管理、数据抽取、批量任务调度等核心模块,实现数据从ODS层到前置库的清洗与转换,为公司数据整合及自动化报告生成提供支撑。
•参与真实世界研究系统数据层设计,运用ETL技术完成患者信息、用药记录、诊断数据的标准化处理;采用MD5加密、Token验证等技术保障数据安全,具备医疗数据全流程处理经验。
2018.01-2018.07 北京载优道有限公司 PHP工程师
•设计后台数据处理模块,通过SQL语句优化及数据过滤逻辑设计,实现业务数据高效抽取与转换,保障项目核心功能稳定运行。
2016.11-2017.01 乐木优创/壹门徒 PHP程序员
•负责企业网站、商城系统数据层开发,熟练运用PHP+MySQL技术实现数据存储与查询优化,具备小型系统数据处理与维护能力。
项目经历
2025.02-至今 安定医院数据平台ETL体系建设项目
•项目描述:基于DTSphere系列产品(Bridge/River/DSC)构建医院数据平台ETL体系,整合多源医疗数据,为临床诊疗、医保对接、科研分析等核心业务提供支撑,满足数据同步实时性、安全性及合规性要求。
•核心职责:负责ETL流程设计、数据转换规则配置、作业调度优化、数据质量监控及故障处理;开发自动化运维脚本,保障平台稳定性(系统可用性≥99.95%)及数据准确性

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服