案例介绍
项目介绍：招标数据清洗、GPS数据清洗、基于APP埋点日志和业务数据构建用户画像进行招标文件推荐、匠人推荐
1. 招标数据清洗部分
(1). 爬虫系统爬取招标、中标、拟建数据写入Kafka
(2). Flink消费kafka数据进行清洗，Maxwell 同步业务数据与之关联存储hive中
(3). Presto 进行数据查询hive数据展现到APP中
2. GPS数据清洗运用
(1). kafka接收工程车辆安装的GPS传输的数据
(2). 使用Flink清洗GPS数据(GPS数据分段、GPS轨迹漂移、使用基站信息解决GPS数据坐标为0的问题)，数据清洗后存储到clickhouse中
(3).查询clickhouse中数据做GPS分段数据、GPS分段轨迹、GPS自定义轨迹对外提供服务
(4). Flink CEP 对超速、驶入驶出电子围栏进行短信报警
3. 招标推荐、工人推荐
(1). 对APP埋点日志进行清洗存储到数仓中
(2). 埋点数据和业务数据进行关联构建用户画像
(3). 基于用户画像对招标文件和匠人进行推荐
案例图片
相似案例推荐
其他人才的相似案例推荐
-
田长制系统
“济阳区田长制系统”是一套针对田间地块管理的数字化解决方案，
-
某搜索引擎爬虫
使用模拟技术、模仿用户访问网页，爬取数据。 利用模型进
-
apache-seata
Apache/incubator-seata（简称Seata
-
一体化大数据平台
项目名称：一体化大数据平台 项目描述：主要为政府服务的一体
-
商户管理系统
1.项目使用Vue2+VueRouter+axios+Vue
-
学生成绩管理终端
基于C++开发的控制台应用，实现学生成绩全生命周期管理。技术
-
三维领导驾驶舱
主界面为卫星地图，可能基于 GIS（地理信息系统）实现，展示
-
微信小程序商城+PC端+官网
这是一个微信小程序商城，包含后台管理，简易官网介绍。小程序端
-
SPC后台管理系统
1. 项目描述：本项目旨在为学生提供工业软件开发的实践经验，
-
日志告警
1，集群状态告警：通过日志指标监控集群状态触发告警，及时知晓
-
告警流程
日志分析邮件告警；如: 服务出现 error，404，对象存
-
MOM系统（pc）
MOM系统是一种用于管理和优化制造过程的软件系统。它专注于生
微信接收人才推送
关注猿急送微信平台，接收实时人才推送
