ID：314799
12321
大数据开发工程师
- 公司信息：
- 烽火通信
- 工作经验：
- 5年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 可工作日远程
- 所在区域：
- 武汉
- 全区
技术能力
• 熟悉Java、Scala开发语言、Shell脚本
• 熟悉Hadoop、Yarn、Spark、Flink等大数据处理框架
• 熟悉Hive、Hbase、Clickhouse等大数据存储库、熟悉Mysql
• 熟悉ElasticSearch、Kibana、了解Logstash、sqoop、flume
• 熟悉Kafka消息队列
• 熟悉Superset、Davinci BI工具
• 熟悉IDEA、Git等开发工具
项目经验
• 通达信中台大数据平台基础建设
① 大数据平台整体架构部署
② 各类数据的采集、清洗、入库
• 通达信中台大数据平台BI可视化
① BI工具的部署、与各数据库集成
② 各类BI报表的制作
• 网站文书、法规实时流式清洗程序
① 参与整个数据存储、入库、出库全流程讨论，所用组件可行性调研
② 实时读取kafka数据并清洗、抽取各类业务所需字段并导入到mysql和es的程序开发、测试、上线
• 数据仓库的搭建和维护、各类主题数据的导入和维护
① 数据仓库的分层设计、按主题分类设计表结构
② 数据仓库的数据导入导出、数据的校验和维护
• elasticsearch搜索引擎的优化
① es搜索速度优化，通过优化硬件配置和参数配置提升搜索速度
② 通过测试不同风格的搜索语句、查询参数设置优化搜索精准度
相似人才推荐
-
500元/天后端开发暂无概要：熟练掌握Java语言；掌握Spring、Mybatis、SpringMvc框架； 熟悉使用Spri
-
1200元/天研发负责人北京数起科技有限公司概要：精通Java编程，uniapp微信小程序,整个系统的架构设计独立完成，独立带30人团队进行大型项目2 -
500元/天前端开发工程师北京万邑网络科技有限公司概要：1、精通JavaScript、CSS3、HTML5 、ES5、ES6等前端开发技术； 2、精通vu
-
2000元/天全栈开发工程师中国科学院信息工程研究所概要：全栈开发工程师 从设计架构开始全都会 前端后端技术栈比较全面 爬虫 3D网页（目前在做OPENG
-
1000元/天高级系统工程师OPPO概要：1.嵌入式软硬件开发，嵌入式平台stm32,esp32等 2.linux系统工程师，内核驱动、系统
-
500元/天数据开发天创概要：kettle hadoop hive sql python基础 linux常用命令操作 关
-
600元/天算法工程师AI四小龙/华子概要：【极速开发部署反馈】擅长多个领域的技术，涵盖机器学习主要框架tensorflow和pytorch，以
-
800元/天大数据开发工程师NTT DATA概要：1.精通各种关系型数据库脚本开发，熟练掌握hive大数据离线开发、数据中台 2.熟悉cognos、
