流量采集探针 产品负责人 项目描述:探针有主动采集和被动接收两种模式,支持 Tcp/Udp,Mysql,Kafka,ElasticSearch,File,Redis 等多种组件的数据采集与转发,实现多源 接收及转发。部署方式上既能独立运行,又能与探针中心实时联动,支持业务系统对探针进 行采集任务下发,命令执行,健康检查,文件传输,状态监控,记录偏移量等。
个人职责:
l 负责整体项目的框架设计。
l 实现多种类型采集端和转发端间的任意配置,实现数据多进多出。
l 打通探针与探针中心,探针中心与业务端的实时交互,通过心跳检查检查健康状态。
l 探针注册,配置文件热加载,命令执行与结果返回,状态监控,超时处理等。
l 为提升性能,采用对象复用、异步双向流的 GRPC、压缩、连接池等