项目一:运动状态判定和计数(跳绳、仰卧起坐、俯卧撑)
项目概述: 利用摄像头,对用户的运动状态进行判定以及运动次数进行计数。如记录跳绳的次数、仰卧起坐动作是否规范并计数等。
我的分工: 负责模型方案的设计以及实现。使用爬虫搜集数据并指定标注规范,主导标注任务的完成。产品的功能逻辑设计,并在移动端进行了部署。
业绩: 完成了移动端的部署。计数精度97%以上。
项目二:
骨科关键点定位测量(物体检测、关键点定位 )
项目概述: 利用关键点定位技术,针对多种影像数据,多个关键点进行定位,用于相关指标的测量计算。辅助医生进行相关疾病的筛查及诊断。
我的分工: 负责模型方案的设计以及优化、和医院方进行沟通整理项目需求、标注规范的制定、产品功能以及交互界面设计、促进项目落地上线以及 bug 修复、后期需求更新等任务。
业绩: 1.设计了椎体检测+椎体关键点定位的方案。在椎体关键点定位任务上,提出了“高斯热图分组”改进策略,极大的提升了关键点的定位精度。模型在 2mm 尺度上的召回率超过 0.8,优于普通标注人员的标注精度。2. 促进项目的落地上线, 目前腰椎的定位测量项目,合作方医院已经上线使用,并申请相关专利。
项目三:静默活体检测(图像分类)
项目概述: 配合未成年防沉迷系统,进行用户身份验证,需要先判断人脸信息是否为照片视频等翻拍攻击
我的分工: 模型的优化方案制定,任务上线
业绩:通过改进模型方案以及新采集了部分数据,极大提升了算法的精度,达到线上服务需求,替换了第三方的服务。
项目四:人脸年龄预测
项目概述: 通过人脸图像数据,判定用户年龄
我的分工: 技术优化方案制定,模型训练,任务上线
业绩:设计了利用一维高斯heatmap对标签进行编码,修改模型训练时的监督方式,替代了主流的回归/分类 方案。极大提升了模型的精度和稳定性。目前模型已上线使用。