反作弊通用算法
项目背景: 反作弊通用算法方法论,支持流量业务在线过滤需求
责任描述:
1. 完善反作弊波动性和粒子性理论;
2. 作弊ID记忆模型,流式训练记忆历史一年作弊pattern;
3. 用户行为异常模型,通过用户侧连续值特征提升模型泛化能力;
4. 多特征异常检测模型,纯白样本训练AutoEncoder模型刻画正常分布。
主要业绩:
1. ID模型增量训练时间<5min,f1 0.94 recall 0.90 precision 0.99;
2. 相关系数、GBDT及人工经验特征选择,去除93%冗余特征;
3. 多特征异常检测模型+DNN二分类模型,f1 0.969 recall 0.949 precision
反作弊特征中心
责任描述:
1. 设计实时、离线统一特征中心,包括特征元数据管理、自动代码生成等模块
2. 确定特征中心后端存储选型,以及提供实时特征查询服务;
3. 社区发现,用户侧作弊识别。
主要业绩:
1. 离线计算时间<30min(半年窗口count、avg、distinct等算子),新增特征迭代<0.5人天;
2. 确定特征中心后端存储选型,以及提供实时特征查询服务;
3. 构建用户知识图谱,设计一阶同人模型,供直通⻋、直播等多个业务使用;
4. 引入点击宝⻉和类目为边,基于gcn识别作弊用户,召回提升约20%。