架构师、高级 Java 软件开发工程师
中国电信上海理想集团 · 8年经验
聪
日薪: ¥800/8h
地点: 武汉 全区
时间: 下班后周六周日可工作日远程
ID:155676 复制

0
接单数
0
评价数
0
收藏数

AI 技能提取 | Java Oracle Neo4j Spring 分布式 Spring Boot Spring Cloud MyBatis Kafka RabbitMQ Elasticsearch Spark ClickHouse Redis MongoDB
技术栈:
1.熟悉java语言,能熟练使用面向对象方法进行程序设计开发;
2.熟悉SpringCloud,SpringBoot,SSH/SSM,Spring-MVC/Spring/Mybatis/Hibernate框架下的开发;
3.参与PB量级数据分析产品得架构设计;
4.熟悉掌握文档数据库Elasticsearch,有PB级数据量下数据检索项目架构及实际开发经验;
5.熟悉Clickhouse,具备分布式Clickhouse集群搭建及千亿级数据在线数据分析经验;
6.熟悉activiti流程引擎,对activiti有深层次的理解,掌握其开源框架的数据表结构关系,对其
流程跳转,流程调度,等OA流程有较深层次的了解;
7.熟悉消息中间层RabbitMQ,Kafka等,熟悉主流的服务器端缓存技术:Redis等;
8.掌握SQL语法优化,存储过程,熟练掌握oracle数据的awr日志的收集和分析,对慢sql进行优化
处理;熟悉非关系型数据库MongoDB;
9.熟悉Linux常用命令操作;熟练掌握关系数据库neo4j,熟悉十亿级节点数据量下关系分析,熟练
使用时序数据库influxdb;
10.具备丰富得ETL数据采集经验,熟悉小量级数据采集工具kettle、streamsets;具备百亿千亿级别
数据量级下基于spark/flink的实践经验;
11.了解Scala语言,
具备基础Scala语言的开发工作,
具备基于Scala语言spark的大数据处理经验;

项目描述:大数据分析产品是通过采集现网海量数据进行分析,从而得到有价值的线索,增量
采集数据速度6万/秒,数据总量PB级别,分为智能检索、AJ 管理、个人档案、线索查找、网络管理、
报表中心。对海量数据进行分层处理,数据仓库ODS、DWS、ADS,ODS为底层明细数据,DWS为清
洗后宽表数据,ADS为上层业务聚合统一分析层。
环境:
idea、
Linux、
springcloud框架、
svn代码管理、
maven、
Kafka消息组件、
ES文档数据库、
mysql
关系型数据库、
redis缓存技术、
spark离线任务处理、
flink数据清洗处理、
Hadoop集群
(yarn、
hbase)

neo4j关系型数据库、vue前端框架。
责任描述
责任描述:
1、公共组件项目组PL,负责公司整体公共组件微服务的方案设计,带领组员进行研发。统一门户用户
管理研发,基于老的.net语言指纹登录代码,改造客户端.net代码,编写指纹登录数据流程,方案设
计;统一权限中心模块的方案设计,基于统一拦截实现权限的统一调配;
2、个人档案项目组PL,负责公司个人档案模块的架构设计及方案概要设计的编写,底层引擎,个人档案生产的代码编写:
海量数据人员、
网站、应用等档案生成,基于neo4j实现档案的关系分析扩线;
基于clickhouse实现档案海量数据时、天、月纬度实时分析,对各个档案进行全面的画像分析;
3、智能搜索组搜索引擎的研发工作,
负责公司智能搜索组核心搜索引擎的研发工作,
基于ES海量数据
的索引治理管理,海量数据的存储设计方案。
聪 ID:155676 复制

架构师、高级 Java 软件开发工程师 · 8年经验 · 中国电信上海理想集团
城市武汉 全区 日薪800元/8h 时间 下班后周六周日可工作日远程
0
累计接单
0
用户评价
0
被收藏

信用行为

0
接单数
0
评价数
0
收藏数

技术能力

AI 技能提取 | Java Oracle Neo4j Spring 分布式 Spring Boot Spring Cloud MyBatis Kafka RabbitMQ Elasticsearch Spark ClickHouse Redis MongoDB
技术栈:
1.熟悉java语言,能熟练使用面向对象方法进行程序设计开发;
2.熟悉SpringCloud,SpringBoot,SSH/SSM,Spring-MVC/Spring/Mybatis/Hibernate框架下的开发;
3.参与PB量级数据分析产品得架构设计;
4.熟悉掌握文档数据库Elasticsearch,有PB级数据量下数据检索项目架构及实际开发经验;
5.熟悉Clickhouse,具备分布式Clickhouse集群搭建及千亿级数据在线数据分析经验;
6.熟悉activiti流程引擎,对activiti有深层次的理解,掌握其开源框架的数据表结构关系,对其
流程跳转,流程调度,等OA流程有较深层次的了解;
7.熟悉消息中间层RabbitMQ,Kafka等,熟悉主流的服务器端缓存技术:Redis等;
8.掌握SQL语法优化,存储过程,熟练掌握oracle数据的awr日志的收集和分析,对慢sql进行优化
处理;熟悉非关系型数据库MongoDB;
9.熟悉Linux常用命令操作;熟练掌握关系数据库neo4j,熟悉十亿级节点数据量下关系分析,熟练
使用时序数据库influxdb;
10.具备丰富得ETL数据采集经验,熟悉小量级数据采集工具kettle、streamsets;具备百亿千亿级别
数据量级下基于spark/flink的实践经验;
11.了解Scala语言,
具备基础Scala语言的开发工作,
具备基于Scala语言spark的大数据处理经验;

项目经验

项目描述:大数据分析产品是通过采集现网海量数据进行分析,从而得到有价值的线索,增量
采集数据速度6万/秒,数据总量PB级别,分为智能检索、AJ 管理、个人档案、线索查找、网络管理、
报表中心。对海量数据进行分层处理,数据仓库ODS、DWS、ADS,ODS为底层明细数据,DWS为清
洗后宽表数据,ADS为上层业务聚合统一分析层。
环境:
idea、
Linux、
springcloud框架、
svn代码管理、
maven、
Kafka消息组件、
ES文档数据库、
mysql
关系型数据库、
redis缓存技术、
spark离线任务处理、
flink数据清洗处理、
Hadoop集群
(yarn、
hbase)

neo4j关系型数据库、vue前端框架。
责任描述
责任描述:
1、公共组件项目组PL,负责公司整体公共组件微服务的方案设计,带领组员进行研发。统一门户用户
管理研发,基于老的.net语言指纹登录代码,改造客户端.net代码,编写指纹登录数据流程,方案设
计;统一权限中心模块的方案设计,基于统一拦截实现权限的统一调配;
2、个人档案项目组PL,负责公司个人档案模块的架构设计及方案概要设计的编写,底层引擎,个人档案生产的代码编写:
海量数据人员、
网站、应用等档案生成,基于neo4j实现档案的关系分析扩线;
基于clickhouse实现档案海量数据时、天、月纬度实时分析,对各个档案进行全面的画像分析;
3、智能搜索组搜索引擎的研发工作,
负责公司智能搜索组核心搜索引擎的研发工作,
基于ES海量数据
的索引治理管理,海量数据的存储设计方案。
客服二维码

没找到合适的人才?

扫码添加客服极速匹配,或直接发布需求让更多人才主动报名

平台担保交易 · 1小时内不满意可退款

平台信誉与实力

基于 35,336 需求方信任

  • 支付宝企业信用分 优秀 评级
  • 市场份额约占全行业三分之一
  • 程序员兼职行业全能首选平台
查看平台资质详情
收藏