东邪
数据架构师
- 公司信息：
- 递四方信息科技
- 工作经验：
- 7年
- 兼职日薪：
- 800元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 可工作日远程
- 所在区域：
- 深圳
- 宝安
技术能力
本人全栈开发工程师，担任过递四方信息科技数据架构师。先后从事过前端，后端（java），大数据相关工作。技术栈全面，技术栈如下：java,python,javascript,h5,spring,hadoop,flink,spark,hive,阿里的maxcomputer以及各类阿里系产品均较为熟悉。
● 三年多阿里云各类大数据等云产品（maxcomputer,quickbi,AnalyticDB,dts,datahub,blink,hologres）使用经验,能基于阿里云独立搭建整套数据仓库
● 三年hadoop使用经验，深入了解hadoop生态圈各类技术栈(hadoop,hive,spark,flink,hbase,kafka)
● 有较强执行力，较强解决问题能力，有带团队经验
项目经验
递四方双十一大屏&实时数仓
● 架构及心路历程：
概述：mysql ------- dts ------- binlog ------- datahub -------blink-------hologres------datav
a、业务数据mysql通过dts将binlog接入datahub，blink消费多个业务系统数据，ETL在数据流中处
理，多个topic根据主键写入hologres，此时在hologres形成一张直发全链路的宽表，后期计算
无需考虑多个事实表的join；
b、考虑hologres可以集成maxcompute的表数据，此时我们考虑使用lamdba架构，全量数据 = 事
实数据+T-1离线数据
● 考虑hologres不支持事务，无法利用二阶段提交实现blink精准一次消费，且我们是根据主键insert
update 的方式，保证至少一次消费即可满足我们业务需求
相似人才推荐
-
500元/天服务端工程师北京光音网络股份有限公司概要：1、掌握golang、Node.js和PHP后端编程语言 2、掌握HTML 、CSS 、Java
-
600元/天软件开发工程师杭州涂鸦信息技术有限公司概要：6年嵌入式软件开发经验，熟练应用C/C++，熟练掌握Linux操作系统。主要从事于音视频网络传输协议 -
800元/天高级软件工程师用友网络科技股份有限公司概要：1、熟悉Springcloud、Springboot、MyBatis、JPA、dubbo等微服务框架 -
500元/天后端开发工程师房车宝信息技术(深圳)有限公司概要：熟悉Java基础、面向对象设计原则、常用的设计模式及其使用场景、分布式架构与原理，具有云控平台和Sa
-
600元/天全栈贝尔概要：* java spring hibernate spring boot,spring cloud技术
-
500元/天nlp爱奇艺概要：算法 - 良好的数据结构设计及编码能力， 熟悉c++/Python - 有深度学习和增强学习研究
-
500元/天高级后台开发工程师平安国际智慧城市科技股份有限公司概要：1.熟练掌握Spring boot、Spring Cloud微服务架构； 2.熟练掌握Spring
-
500元/天后端工程师分众游戏概要：c++ 熟悉，unity3d游戏开发也比较熟悉， 熟悉unity各种插件相关。对于游戏前端非常了解
