离线项目职责: 1.参与数据仓库的搭建,明确数据域,包括用户域,流量域,交易域等主题域,参与设计DWD,DWS,ADS层 2.设计全局唯一用户标识 UUID 以及用户拉链表,解决多端用户数据关联问题,用户行为分析准确率提升40% 3.完成用户主题相关指标,日活,周活,月活,每日新增用户,用户留存,连续登录等 4.搭建 FLume双层高可用架构,通过主链路容灾机制解决数据采集零点漂移问题,数据丢失率降低85% 5.数据ODS层到DWD层的ETL清洗过程,包括对数据清洗过滤,数据规范化处理,Sesion分割,地理位置转换,全局唯一用户标识,标记新 老用户等处理 6.使用DolpinS
内容: 亿联主打销售自家企业级通讯设备,其主要客户主要来源海外,通过代理及经销商等中间商将亿联产品面向全球,至此需要一套 稳定完整有效率的大数据平台提供给每月十号左右经分会进行分析整体亿联盈利情况等,旧架构采用MySQL作为底层数据仓库, 使用kettle etl工具向YCRM ,OPC等业务系统数据库直接采取数据并完成数据清洗,再将每个模块严格按照数仓模型进行构建出每 个模块所需业务表,使用FineReport及PowerBI设计报表,最终powerlink呈现报表并以此来限制公司各个部门以及各个员工的数 据权限,粒度到报表行及列,新架构主要替换MySQL为StartRocks,并
离线项目职责: 1.参与数据仓库的搭建,明确数据域,包括用户域,流量域,交易域等主题域,参与设计DWD,DWS,ADS层 2.设计全局唯一用户标识 UUID 以及用户拉链表,解决多端用户数据关联问题,用户行为分析准确率提升40% 3.完成用户主题相关指标,日活,周活,月活,每日新增用户,用户留存,连续登录等 4.搭建 FLume双层高可用架构,通过主链路容灾机制解决数据采集零点漂移问题,数据丢失率降低85% 5.数据ODS层到DWD层的ETL清洗过程,包括对数据清洗过滤,数据规范化处理,Sesion分割,地理位置转换,全局唯一用户标识,标记新 老用户等处理 6.使用DolpinS...
内容: 亿联主打销售自家企业级通讯设备,其主要客户主要来源海外,通过代理及经销商等中间商将亿联产品面向全球,至此需要一套 稳定完整有效率的大数据平台提供给每月十号左右经分会进行分析整体亿联盈利情况等,旧架构采用MySQL作为底层数据仓库, 使用kettle etl工具向YCRM ,OPC等业务系统数据库直接采取数据并完成数据清洗,再将每个模块严格按照数仓模型进行构建出每 个模块所需业务表,使用FineReport及PowerBI设计报表,最终powerlink呈现报表并以此来限制公司各个部门以及各个员工的数 据权限,粒度到报表行及列,新架构主要替换MySQL为StartRocks,并...
添加客服微信,免费为您安排与该工程师直接沟通
长按二维码添加客服微信
如该工程师当前档期不合,也可免费为您推荐相似候选人