基于人像美颜美妆的需求,我们构建了一个检测精度高、点位密集(275点)、高性能的人脸关键点检测SDK,可广泛应用于人脸识别,活体检测、表情分析,人脸重建等领域
功能特点:
1. 支持嘴唇密集点位检测及眼球瞳孔跟踪
2. 支持大幅度人脸旋转与极端姿态
3. 对遮挡及光照不佳等条件鲁棒
4. 毫秒级推理(4~5ms单人脸),支持跨平台
技术实现:
1. 模型设计上使用轻量级Backbone;Loss额外使用人脸姿态进行惩罚项;同时加入辅助网络估计人脸姿态(欧拉角);数据增强使用随机旋转+遮挡+色彩扰动增强模型鲁棒性
2. 使用人脸对齐方式增强模型对极端姿态鲁棒性
3. 落地方面使用Torch-->Onnx-->Ncnn,使用C++封装可移植至移动端
4. SDK已应用至活体检测及人像美颜等项目