小老虎咬人
大数据开发工程师
- 公司信息：
- 好好住
- 工作经验：
- 5年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 所在区域：
- 宁波
- 全区
技术能力
● 编程语言: 熟悉java、scala以及python进行开发;
● Flink: 能够使用flink进行实时业务开发；
● Presto: 能够使用 Presto对数据进行分析；
● StarRocks: 熟悉 Starrocks 四种表模型以及各种数据同步导出方式 ，能对建表语句进行优化加快查询速度；
● Kafka: 熟悉 Kafka 架构与文件存储机制与分区分配策略、熟悉 Kafka 数据丢失以及数据重消费解决方案 ，深入
理解 Kafka ACK 机制 ，能完成 Kafka 与 Flink ，spark 的对接进行生产与消费；
● Redis: 熟悉使用 Redis ；
● Spark: 了解 Spark 能够使用 Spark core、 Spark Sql、 Spark Streaming 相关 API 进行相关业务的开发；
● Hive: 了解 Hive 底层架构与运行原理 ， Hive 的性能优化 ，数仓设计与数仓分层建设；
● 工具: 能够使用 Flume、 DataX 等工具完成对日志数据与业务数据的采集与同步
● Zookeeper: 了解 Zookeeper 的选举机制以及容错机制;
● Hbase: 了解 Hbase 的原理及部分优化措施；
● SpringBoot: 能使用其完成对平台后端接口的开发
● Vue: 能使用其完成对前端页面的开发
项目经验
项目名称：好好住推荐线内容数据---冷启动项目
项目架构：Kafka+Maxwell+Flink +Starrocks+Redis
项目背景：该项目是基于用户行为数据（点赞、评论）和用户发布内容的业务数据，将这些数
据通过 Flink 从 Kafka 进行消费并进行实时逻辑处理，将内容 id 根据不同的逻辑判断存至
Redis 中的三个池子中 ，为算法进行内容冷启动数据建模提供数据支持。
职责描述
1. 使用 Flink 对用户行为数据以及内容数据进行处理并进行计算。
2. 使用 Starrocks 的明细模型表对内容数据进出池子进行记录。
3. 完成后续监控措施 ，以确保任务稳定性以及数据的准确性。
项目名称：赛和轴承网B2B2C（平台端、商户端）
项目架构：Vue + Element + SpringBoot+Redis+MybitsPlus+Mysql
项目背景：为用户提供发布轴承相关产品的采购需求以及供应需求提供平台，让用户在平台内可
通过申请开通商户，从而在商户端发布自己所需要的需求。
职责描述：
1. 负责平台端新闻资讯模块、采购供应现货特价管理模块、商品管理模块、订单管理等模块
的前端页面及接口开发。
及接口开发。
2. 负责商户端采购供应现货特价信息模块、店铺模块、商品模块、订单等模块的前端页面
项目名称：赛和内部ERP系统
项目架构：PhP + mysql + Nginx + Redis
项目背景：因公司需求，提高工作效率，开发内部员工所使用的ERP系统
职责描述：
1. 负责开发内部订单管理模块。
2. 负责开发内部仓库管理模块。
3. 负责开发内部轴承价格查询模块
