ID:155676

架构师、高级 Java 软件开发工程师

  • 公司信息:
  • 中国电信上海理想集团
  • 工作经验:
  • 8年
  • 兼职日薪:
  • 800元/8小时
  • 兼职时间:
  • 下班后
  • 周六
  • 周日
  • 可工作日远程
  • 所在区域:
  • 武汉
  • 全区

技术能力

技术栈:
1.熟悉java语言,能熟练使用面向对象方法进行程序设计开发;
2.熟悉SpringCloud,SpringBoot,SSH/SSM,Spring-MVC/Spring/Mybatis/Hibernate框架下的开发;
3.参与PB量级数据分析产品得架构设计;
4.熟悉掌握文档数据库Elasticsearch,有PB级数据量下数据检索项目架构及实际开发经验;
5.熟悉Clickhouse,具备分布式Clickhouse集群搭建及千亿级数据在线数据分析经验;
6.熟悉activiti流程引擎,对activiti有深层次的理解,掌握其开源框架的数据表结构关系,对其
流程跳转,流程调度,等OA流程有较深层次的了解;
7.熟悉消息中间层RabbitMQ,Kafka等,熟悉主流的服务器端缓存技术:Redis等;
8.掌握SQL语法优化,存储过程,熟练掌握oracle数据的awr日志的收集和分析,对慢sql进行优化
处理;熟悉非关系型数据库MongoDB;
9.熟悉Linux常用命令操作;熟练掌握关系数据库neo4j,熟悉十亿级节点数据量下关系分析,熟练
使用时序数据库influxdb;
10.具备丰富得ETL数据采集经验,熟悉小量级数据采集工具kettle、streamsets;具备百亿千亿级别
数据量级下基于spark/flink的实践经验;
11.了解Scala语言,
具备基础Scala语言的开发工作,
具备基于Scala语言spark的大数据处理经验;

项目经验

项目描述:大数据分析产品是通过采集现网海量数据进行分析,从而得到有价值的线索,增量
采集数据速度6万/秒,数据总量PB级别,分为智能检索、AJ 管理、个人档案、线索查找、网络管理、
报表中心。对海量数据进行分层处理,数据仓库ODS、DWS、ADS,ODS为底层明细数据,DWS为清
洗后宽表数据,ADS为上层业务聚合统一分析层。
环境:
idea、
Linux、
springcloud框架、
svn代码管理、
maven、
Kafka消息组件、
ES文档数据库、
mysql
关系型数据库、
redis缓存技术、
spark离线任务处理、
flink数据清洗处理、
Hadoop集群
(yarn、
hbase)

neo4j关系型数据库、vue前端框架。
责任描述
责任描述:
1、公共组件项目组PL,负责公司整体公共组件微服务的方案设计,带领组员进行研发。统一门户用户
管理研发,基于老的.net语言指纹登录代码,改造客户端.net代码,编写指纹登录数据流程,方案设
计;统一权限中心模块的方案设计,基于统一拦截实现权限的统一调配;
2、个人档案项目组PL,负责公司个人档案模块的架构设计及方案概要设计的编写,底层引擎,个人档案生产的代码编写:
海量数据人员、
网站、应用等档案生成,基于neo4j实现档案的关系分析扩线;
基于clickhouse实现档案海量数据时、天、月纬度实时分析,对各个档案进行全面的画像分析;
3、智能搜索组搜索引擎的研发工作,
负责公司智能搜索组核心搜索引擎的研发工作,
基于ES海量数据
的索引治理管理,海量数据的存储设计方案。

案例展示

  • 海量数据检索引擎

    海量数据检索引擎

    知识库搜索软件的核心功能是结合知识库对多中心业务元数据进行统一搜索,利用用户输入的关键词句在海量信息数据中快速、准确的返回用户所需的信息。本软件支持对业务元数据和非结构化数据进行统一抽取、匹配、建立索引和搜索。

  • 文件转换神器

    文件转换神器

    免费pdf转doc,免费excel转PDF,免费excel转换成PDF格式,免费excel转PDF在线,免费excel转换PDF,免费在线excel转PDF,免费excel转PDF,免费视频转换 ,免费图片转换,前端后台一体开发。

  • 博客技术分享网站

    博客技术分享网站

    前后台一体搭建的博客技术分享平台,个人,内容为个人原创及各大技术网站实时爬虫,国内csdn网站,国外技术网站实时爬取内容并展示。

查看案例列表(含更多 0 个案例)

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系聘用方端客服
联系聘用方端客服