交通行业数据集市
项目描述:
为了提升研发人员对政企单位交通类需求的处理速度,部门领导决定在电信自有数据仓库基础上,根据交通行业客户的各类需求,开发对应的交通行业数据集市。包括职住、出行OD、通勤、人口分布等各类宽表。
整个集市以电信数据仓库为数据源,按照各主题需求,通过hive+spark的方式进行数据处理,生成对应的hive表。
集市项目部署在azkanban调度系统上,以事件依赖的形式依次触发并按天执行。
我的职责:
编写设计文档,主持设计评审;
优化OD算法,超速算法,出行算法等集市内核心算法;
支撑测试、平台等部门,协助程序测试及上线部署;
负责集市的版本更新和日常运营等。
煤矿井下交通智能管理系统,主要通过各类矿井设备和车辆人员的管
中车集团能源管理信息系统,是为企业节能做的一款系统,负责企业
爬取游侠网在的部分新闻然后保存下来用html保存的 利用的
简单图片的爬取。 1、包装好基本请求头 2、在当前目录下
项目描述:主要是海洋环境实时在线监测数据、视频监控数据和X波
我主要负责后端,给移动端提供接口(springboot +
需求方专属客服,免费梳理匹配
添加客服微信,免费为您安排与该工程师直接沟通
长按二维码添加客服微信
如当前档期不合,也可免费为您推荐相似案例作者