基于大数据 和可视化的AI工程化平台建设
项目职务:项目负责人
项目描述:
本项目的主要目标是提供基于大数据和可视化的AI工程化平台,实现了集模型元信息管理、数据预处理、特征工程、模型训练、模型部署发布、监控运维、流程编排的一站式研发全流程。基于数据集快捷开发、简单复用;特征数据自动统计、自动同步;多平台完全打通,快捷双向同步;模型文件自动转化并校验;简单的特征处理,快速的一键部署;强大的DAG调用,轻松以各种方式运行任务等优点,达到了模型研发工程化的目标。
项目职责:
1.全面负责AI平台的调研、规划、设计及研发工作
2.项目组内人员的统筹调度与安排,以及与各部门的协调沟通,推进项目平台的顺利落地使用
3.持续优化软件开发的工作流程及规范,不断地积累与迭代本组人员的研发能力,推进团队与个人在集团内的不断晋升,打造氛围良好的学习型团队
4.负责推广平台在集团内AI及相关团队的使用,实现让公司内部的开发者更高效、简洁、标准的使用人工智能技术
CQ数据整合及金融数据仓库建设
项目职务: 项目负责人
项目描述: 携程收购qunar后,消金的数据组一直在两套不同的工作环境下,构建数据仓库及对外提供数据服务,维护成本非常高,另外CQ两侧的数据无法实现数据打通。故,通过此项目,打通CQ两侧ODS层数据,并在此基础上进行数据仓库的主题层、应用层的建设。
项目职责:
1.负责整个项目的规划、实施, 包括:
1).对于Q侧的数据,进行迁移:实现Q侧的金融、支付、征信、用户中心、订单中心、无线公共、风控的数据同步至携程的hive数据仓库的ODS层,确保数据时效性与正确性
2).对于C侧的数据,协商沟通采集:实现C侧的用户中心、支付中心、订单、行为数据、风控等的数据有权限并采集至数据仓库的ODS层
3).基于ODS层CQ数据,实现主题层数据建设,完成基础数据的清洗、解析、转化及拉链处理
4).基于主题层的数据,实现报表、征信、模型、画像等应用层的构建
2.人员的职责分工
3.主要模块的开发,及整体流程的搭建
4.对于整个项目的进度把控,及督促项目按时完成
5.对于C侧的工作环境,给相关人员培训,包括:宙斯系统、adhoc查询系统、artnova报表系统等
风控模型体系建设
风控实时计算平台RTC
E缴通公共缴费平台
海量票据云存储
财厅银行对接项目