骄阳似我

JAVA开发工程师
大数据技术 · 5年经验
骄阳似我
日薪: ¥500/8h
地点: 济南
时间: 下班后周六周日可工作日远程
ID:442396 复制

0
接单数
0
评价数
0
收藏数

AI 技能提取 | Linux Spring Boot Spring Cloud Java Python MySQL Redis Oracle Hadoop Flink ZooKeeper Nginx HTML
开发语言:java、python
框架:springboot、springcloud、mvc
前端:vue2、js、html
中间件/工具:redis、nacos、zookeeper、hadoop、seatunnel、flink、dolphinscheduler、nginx、promethues等大数据相关
数据库:oracle、mysql、达梦等
运维:熟悉linux运维命令,熟练应用部署、日志排查

项目背景:
实时数据平台基于二次开发的 DolphinScheduler对接 Flink / SeaTunnel 任务,将数据同步作业提交到 Hadoop + YARN 集群执行,并使用 HDFS 作为资源存储。平台涉及 JDK、Python3、ZooKeeper、Hadoop、Flink、SeaTunnel、wisewebscheduler、Redis、Nginx、n9e、Prometheus、wwdl 系统服务等多个组件,传统手工部署耗时长、环境一致性差、交付效率低,因此需要引入 Ansible 实现标准化、可重复、可配置IP的快速交付。

我的职责:
负责实时数据平台 Ansible 自动化部署方案设计,包括节点角色规划、Inventory 分组设计、变量体系设计、Jinja2 模板配置、Playbook 编排以及非 root 用户部署流程落地。针对交付 IP 不固定的问题,通过 ansible_host、host_vars 和 Jinja2 模板实现配置动态渲染;针对二次开发的 DolphinScheduler、Flink、SeaTunnel 和 Hadoop,完成三节点集群部署规划;同时统一使用 wwdl 用户进行部署,避免 root 权限风险。

结果产出:
输出了一套可复用的 Ansible 部署工程,包含 inventory.ini、ansible.cfg、group_vars、host_vars、多个组件 Role 以及主 Playbook。部署时只需替换 Inventory 中的 IP,即可自动完成 JDK、Python3、ZooKeeper、Hadoop、Flink、SeaTunnel、DolphinScheduler、Redis、Nginx、n9e、Prometheus、wwdl 系统服务的安装、配置和启停,显著降低人工交付成本,提升环境一致性和交付效率。
骄阳似我 ID:442396 复制

骄阳似我

JAVA开发工程师 · 5年经验 · 大数据技术
城市济南 日薪500元/8h 时间 下班后周六周日可工作日远程
0
累计接单
0
用户评价
0
被收藏

信用行为

0
接单数
0
评价数
0
收藏数

技术能力

AI 技能提取 | Linux Spring Boot Spring Cloud Java Python MySQL Redis Oracle Hadoop Flink ZooKeeper Nginx HTML
开发语言:java、python
框架:springboot、springcloud、mvc
前端:vue2、js、html
中间件/工具:redis、nacos、zookeeper、hadoop、seatunnel、flink、dolphinscheduler、nginx、promethues等大数据相关
数据库:oracle、mysql、达梦等
运维:熟悉linux运维命令,熟练应用部署、日志排查

项目经验

项目背景:
实时数据平台基于二次开发的 DolphinScheduler对接 Flink / SeaTunnel 任务,将数据同步作业提交到 Hadoop + YARN 集群执行,并使用 HDFS 作为资源存储。平台涉及 JDK、Python3、ZooKeeper、Hadoop、Flink、SeaTunnel、wisewebscheduler、Redis、Nginx、n9e、Prometheus、wwdl 系统服务等多个组件,传统手工部署耗时长、环境一致性差、交付效率低,因此需要引入 Ansible 实现标准化、可重复、可配置IP的快速交付。

我的职责:
负责实时数据平台 Ansible 自动化部署方案设计,包括节点角色规划、Inventory 分组设计、变量体系设计、Jinja2 模板配置、Playbook 编排以及非 root 用户部署流程落地。针对交付 IP 不固定的问题,通过 ansible_host、host_vars 和 Jinja2 模板实现配置动态渲染;针对二次开发的 DolphinScheduler、Flink、SeaTunnel 和 Hadoop,完成三节点集群部署规划;同时统一使用 wwdl 用户进行部署,避免 root 权限风险。

结果产出:
输出了一套可复用的 Ansible 部署工程,包含 inventory.ini、ansible.cfg、group_vars、host_vars、多个组件 Role 以及主 Playbook。部署时只需替换 Inventory 中的 IP,即可自动完成 JDK、Python3、ZooKeeper、Hadoop、Flink、SeaTunnel、DolphinScheduler、Redis、Nginx、n9e、Prometheus、wwdl 系统服务的安装、配置和启停,显著降低人工交付成本,提升环境一致性和交付效率。
客服二维码

没找到合适的人才?

扫码添加客服极速匹配,或直接发布需求让更多人才主动报名

平台担保交易 · 1小时内不满意可退款

平台信誉与实力

基于 35,336 需求方信任

  • ✓ 支付宝企业信用分 优秀 评级
  • ✓ 市场份额约占全行业三分之一
  • ✓ 程序员兼职行业全能首选平台
查看平台资质详情
收藏